How Generative AI Disrupts Search: An Empirical Study of Google Search, Gemini, and AI Overviews
这项实证研究通过比较谷歌搜索、AI 概览和 Gemini,分析了生成式人工智能如何颠覆传统网络搜索,揭示了其在来源选择上的显著差异、一致性降低以及对屏蔽 AI 爬虫的网站可见性下降等问题,同时呼吁建立可持续的营收框架以支持该生态系统。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象互联网是一座巨大的图书馆。多年来,如果你向图书管理员(谷歌搜索)询问一本关于“如何修理漏水的水龙头”的书,他们会从顶层书架递给你一份最流行、最可靠的指南清单。你会挑选一本,走过去,自己阅读。
这篇论文是一份成绩单,记录了当那位图书管理员获得一位新助手(生成式人工智能)时会发生什么。这位助手超级聪明,但有时过于热情:它不再只是递给你一份书单,而是阅读所有书籍,总结最佳部分,并当场在桌边为你撰写一个新的故事。
以下是研究人员在比较旧图书管理员、新 AI 助手以及另一款 AI 聊天机器人(Gemini)时,针对超过 11,000 个真实问题所发现的结论。
1. 新助手无处不在(但很挑剔)
研究人员发现,对于人们提出的约一半真实问题,这位新 AI 助手(称为"AI 概览”或 AIO)会跳出来,在展示链接列表之前先给你一个总结。
- 类比:这就像走进一家商店,售货员在你甚至还没看货架时就立刻大喊:“答案在这里!”
- 陷阱:这位助手喜欢长而具体的问题(例如“如何清洁披萨石?”),但会忽略简单的关键词搜索(例如“披萨石”)。它还热衷于争议性话题,在政治辩论中出现率高达 94%。
2. 它们正在查看不同的书架
最大的震惊在于,这三位“图书管理员”(传统谷歌、AI 概览和 Gemini)很少查看同一本书。
- 类比:想象三个朋友试图描述同一部电影。你期望他们会提到相同的演员和场景。然而,研究人员发现,AI 助手与传统搜索引擎在所使用的来源上,仅有约 15-20% 是一致的。它们本质上是在阅读图书馆中完全不同的区域。
- 偏见:传统搜索引擎坚持使用“著名”的书籍(热门新闻网站、政府和大学)。然而,AI 助手更有可能从谷歌自有属性(如 YouTube 或谷歌自己的网站)中提取信息,并忽略那些著名且可靠的来源。
3. “请勿打扰”标志不起作用
一些大型出版商(如《纽约时报》或 Facebook)竖起了“请勿打扰”标志(技术屏蔽),以阻止 AI 阅读其内容进行训练。
- 预期:你可能会认为 AI 会尊重标志并跳过那些书籍。
- 现实:传统搜索引擎尊重该标志。但 AI 概览呢?它似乎无视了标志。然而,研究人员发现了一个转折:尽管 AI 能够阅读这些被屏蔽的网站,但它仍然很少引用它们。这就像 AI 看到了标志,决定不读那本书,然后完全忘记了这本书的存在。这意味着,屏蔽 AI 的出版商实际上正在损害他们在新系统中的可见性。
4. 助手反复无常(不一致)
如果你问同一个问题两次,传统图书管理员会给你相同的书单。AI 助手呢?就不一定了。
- 类比:如果你今天问 AI“哪家披萨店最好?”,它可能会告诉你“托尼的”。如果你五分钟后再次询问,或者改用笔记本电脑而不是手机询问,它可能会突然告诉你“路易吉的”。
- 问题:AI 对微小的变化也非常敏感。如果你输入"What is"而不是"What's",它可能会给出完全不同的答案。这使得很难相信你能两次获得相同的信息。
5. “高风险”危险区
当人们询问政治或热点新闻等严肃话题时,AI 非常热衷于回答,但它经常出错或带有偏见。
- 发现:对于政治问题,与传统搜索引擎相比,AI 经常选择可信度较低的来源(如粉丝维基或讽刺新闻)。
- 幻觉:在一个真实案例中,AI 自信地宣称一名拳击手赢得了一场尚未发生的比赛,并引用讽刺 Facebook 页面的一篇玩笑帖子作为证据。这就像学生在考试中猜答案,然后写整篇论文来为错误的猜测辩护。
大局观
该论文得出结论,这种新的搜索方式是一把双刃剑。
- 对用户而言:它很方便,但你必须小心,因为 AI 可能会编造内容或使用不可靠的来源,尤其是在严肃话题上。
- 对出版商而言:游戏规则已经改变。热门网站受到的关注减少,而小众网站受到的关注增加。此外,阻止 AI 阅读你的内容实际上可能会导致你的网站在 AI 的回答中完全消失。
- 解决方案:作者建议我们需要达成一项新协议。出版商和 AI 公司需要弄清楚如何分配资金(收入),以便高质量网站能够维持运营,同时让 AI 能够获取最佳、最可靠的信息来提供给我们要。
简而言之,AI 助手是一个强大的新工具,但目前它正在从一套与旧图书管理员不同的、更不稳定、有时也更不可靠的书籍中进行阅读。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。