How Generative AI Disrupts Search: An Empirical Study of Google Search, Gemini, and AI Overviews
この実証研究は、Google 検索、AI オーバービュー、Gemini を比較することで、生成 AI が従来の Web 検索をどのように破壊するかを分析し、ソース選択における顕著な差異、一貫性の低下、AI クローラーをブロックするサイトの可視性低下を明らかにするとともに、エコシステムを支えるための持続可能な収益モデルの必要性を訴えるものである。
原論文は CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
インターネットを巨大な図書館だと想像してみてください。長年、あなたが「水漏れする蛇口を修理する方法」についての本を司書（Google 検索）に尋ねると、彼らは一番上の棚にある最も人気のある信頼できるマニュアルのリストを手渡していました。あなたはそれらの中から一つ選び、棚まで歩き、自分で読んでいたのです。
この論文は、その司書に、単に本のリストを手渡すだけでなく、それらすべてを読み、最良の部分要約し、机の上であなたのために新しい物語を書き上げる、超スマートだが時として過剰に熱心なアシスタント（生成 AI）が加わった際に何が起こるかを報告する成績表です。
ここでは、研究者たちが 11,000 件以上の実際の質問を用いて、従来の司書、新しい AI アシスタント、そして別の AI チャットボット（Gemini）を比較した際に発見したことを示します。
1. 新しいアシスタントは至る所にいる（しかし気まぐれ）
研究者たちは、人々が実際に質問するすべての質問の約半分において、この新しい AI アシスタント（「AI 概要」または AIO と呼ばれる）が割り込んでリンクのリストを表示する前に要約を提供することを発見しました。
- 比喩: 店に入ると、棚を見ることさえもする前に、店員がすぐに「答えはこれです！」と叫ぶようなものです。
- 注意点: このアシスタントは「ピザストーンをどう掃除するか」のような長く具体的な質問を好みますが、「ピザストーン」のような単純なキーワード検索は無視します。また、政治的な議論については 94% の頻度で登場するなど、論争的なトピックを好みます。
2. 彼らは異なる棚を見ている
最大の衝撃は、3 人の「司書」（従来の Google、AI 概要、Gemini）がほとんど同じ本を見ていないということです。
- 比喩: 3 人の友人が同じ映画について説明しようとしている状況を想像してください。同じ俳優や場面を挙げることを期待するでしょう。しかし、研究者たちは、AI アシスタントと従来の検索エンジンが使用したソースについて合意したのは約 15〜20% だけであることを発見しました。彼らは本質的に図書館の全く異なるセクションを読んでいるのです。
- バイアス: 従来の検索エンジンは「有名な」本（人気のあるニュースサイト、政府、大学）に固執します。一方、AI アシスタントは、Google 所有の資産（YouTube や Google 自身のサイトなど）から情報を引き出す可能性がはるかに高く、有名で信頼できるソースを無視します。
3. 「お邪魔しないで」の看板は機能しない
いくつかの大手出版社（『ニューヨーク・タイムズ』や Facebook など）は、AI がトレーニングのために彼らのコンテンツを読むのを防ぐために、「お邪魔しないで」という看板（技術的なブロック）を立てました。
- 期待: AI はその看板を尊重し、それらの本をスキップするだろうと考えられます。
- 現実: 従来の検索エンジンはその看板を尊重します。しかし、AI 概要はどうでしょうか？それは看板を無視しているように見えます。しかし、研究者たちは意外な事実を発見しました。AI はこれらのブロックされたサイトを読むことはできるにもかかわらず、それらを引用することはほとんどないのです。まるで AI は看板を見て、その本を読むのを決め、その本が存在すること自体を忘れたかのようです。これは、AI をブロックする出版社が、実際には新しいシステムにおける自社の可視性を損なっていることを意味します。
4. アシスタントは気まぐれ（一貫性がない）
同じ質問を 2 回すると、従来の司書は同じ本のリストをくれます。しかし、AI アシスタントはどうでしょうか？そうではありません。
- 比喩: 今日 AI に「最高のピザ屋はどこですか？」と尋ねると、「トニーの」について教えてくれるかもしれません。5 分後に再度尋ねるか、ラップトップではなくスマートフォンから尋ねると、突然「ルイージの」について教えてくれるかもしれません。
- 問題点: AI は些細な変化にも非常に敏感です。「What is」と入力する代わりに「What's」と入力すると、全く異なる答えが返ってくるかもしれません。これにより、2 回同じ情報を得ていると信頼することが難しくなります。
5. 「ハイリスク」の危険地帯
人々が政治やトレンドニュースのような深刻なトピックについて質問すると、AI は答えることに非常に熱心ですが、それはしばしば誤っていたり偏っていたりします。
- 発見: 政治的な質問については、AI は従来の検索エンジンと比較して、信頼性の低いソース（ファンウィキや風刺ニュースなど）を選ぶことが多いです。
- 幻覚: 実際の例として、AI はまだ起こっていないボクサーの試合に勝利したと自信を持って宣言し、風刺的な Facebook ページからのジョーク投稿を証拠として引用しました。まるで学生がテストで答えを推測し、その誤った推測を正当化するために全文を記述しているかのようです。
全体像
この論文は、この新しい検索方法が両刃の剣であると結論付けています。
- ユーザーにとって: 便利ですが、AI が事実を捏造したり、特に深刻なトピックについては信頼性の低いソースを使用したりする可能性があるため、注意が必要です。
- 出版社にとって: ゲームのルールが変わりました。「人気のある」ウェブサイトは注目度が低下する一方、ニッチなサイトはより多くの注目を集めています。また、AI がコンテンツを読むのをブロックすることは、実際には AI の回答から自サイトが完全に消えることにつながる可能性があります。
- 解決策: 著者たちは、新しい合意が必要だと提案しています。出版社と AI 企業は、高品質なウェブサイトが存続し、AI が私たちに提供するための最高で最も信頼性の高い情報にアクセスできるように、収益をどう分配するかを解決する必要があります。
要約すれば、AI アシスタントは強力な新しいツールですが、現在は従来の司書とは異なり、より不安定で、時として信頼性の低い本から読んでいるのです。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。