OpenAI がチャットボット ChatGPT を発表したとき、GPTBot と呼ばれる Web クローラーも明らかにしました。クローラーは Google ボットと同じように機能し、Web サイト所有者はこれらのクローラーが robots.txt で Web サイトにアクセスすることをブロックできます。 OpenAI はボットをブロックするためのアクセスも許可しました。 Originality.AI の調査によると、Web サイトの約 48% でアクセスがブロックされていると言われています。その後、Google は、ウェブマスターが検索ボットに影響を与えることなく AI ツールをブロックできるようにする別の Google 拡張ボットも発表しました。
AIロボットに関する継続的な議論
ChatGPT の発表以来、この機能を利用して一部の AI ボットによるサイトへのアクセスをブロックする方法について議論が続けられてきました。このトピックに関する議論は SEO 業界の関係者やほぼすべてのオンライン出版物の間で根強く行われているため、あらゆるレベルのすべての関係者を満足させる単一の答えはありません。多くのサービスが許可なく Web を閲覧しているため、これらのボットをブロックすることが実際的な影響を与えるかどうかについては、これは余談です。
この考え方を裏付ける 1 つの点は、OpenAI のクローラーの発表がかなり遅かったことです。同社はデータを入手するためにさまざまな方法を使用した可能性があり、そのデータはウェブ上で広く入手可能であると彼らは述べています。懸念されるのは、企業が異なる名前や異なるベンダーのボットを使用している可能性があるため、新しいボットをブロックすると、すでに消化されたデータを取り戻すことができなくなることです。
これにより、スクレイパー サイトが、人間が作成したデータで訓練された同じボットからコンテンツを量産することが容易になりました。
彼らはあなたのコンテンツを望んでいます
AI 企業は自社のコンテンツを望んでおらず、いつか自社と同じ品質のコンテンツを作成できるようになるだろうと信じている人もいるかもしれません。そのため、これはコンテンツ中心のサイトにとって非常に憂慮すべき問題です。これは、私たちが知っている SEO 実践の有効性と関連性についても疑問を生じさせます。もう 1 つの問題は、同じコンテンツを作成するサイトが多数存在することです。したがって、これらの点を考慮すると、一部の業界では AI ロボットを大規模にブロックする可能性があります。
ChatGPT のようなボットへのアクセスを支持する専門家は、このサービスが検索エンジンとしてではなく、特にコード作成、翻訳、さらにはコンテンツ作成のアシスタントとして使用されているという事実に基づいて議論を行っています。また、Bing が ChatGPT を統合して以来、Bing の市場シェアは 1% しか増加していないとも述べています。現時点ではGoogleはAIボットは別個だとしているが、将来的にGoogleは検索結果にAIを組み込む予定なので、今後どうなるかは分からない。
賛成派は、 チャットボットによるコンテンツ作成だけが問題ではないとも言いますが、彼らによると、重要なのは、彼らがあなたのブランド名を言及すれば、その状況によりあなたのブランドがより幅広い視聴者に認知されるようになるということです。さらに、彼らのアクセスをブロックすると、あなたの考えが将来の LLM のトレーニングに組み込まれなくなります。しかし、将来的にはこれらと同じモデルからブランドや製品のクローンが生成される可能性が高く、最終的にはディープフェイクの問題を増幅させることになります。
AI モデルが SEO と Google にもたらす脅威は、直接の競合相手の脅威ではなく、大規模なコンテンツ作成に使用できるツールの脅威です。これは、Google や Bing に問題を引き起こし、既存の人間のコンテンツを消費するトラフィックを消費するため、検索にとっては好ましくありません。したがって、最終的には、ボットを許可するかどうかの決定は、ブロガーとしての個人の優先順位、または企業としてのパブリッシャーの優先順位を分析した後の好みに依存します。
元のストーリーはここでご覧ください。