← 最新论文
💬 NLP

Disentangling Answer Engine Optimization from Platform Growth: A Log-Based Natural Experiment on ChatGPT Referral Traffic

本文通过对单一领域内带有现场对照组的日志记录进行自然实验,旨在证明虽然 ChatGPT 的原始引流增长主要由平台扩张驱动,但针对性的回答引擎优化(AEO)干预产生了约 1.82 倍的具有统计学暗示性但不具确定性的因果提升,这凸显了将平台顺风效应与真正的优化效果进行解构的必要性。

原作者: Keisuke Watanabe, Kazuki Nakayashiki

发布于 2026-06-04
📖 1 分钟阅读☕ 轻松阅读

原作者: Keisuke Watanabe, Kazuki Nakayashiki

原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

想象一下,互联网是一座繁忙而巨大的城市。多年来,人们一直通过一张巨大的传统地图(谷歌搜索)在城市中寻找场所。但最近,一位新的、神奇的导游出现了:ChatGPT。这位导游不再只是给你一串地址列表,而是直接回答你的问题,并指引你去参观特定的店铺(网站)。

这篇论文是对许多企业主正在思考的一个问题进行的科学调查:“如果我们为了让这位新导游看得更清楚而改造我们的店铺,我们会获得更多顾客吗?而这些顾客中有多少是因为我们的改变,又有多少仅仅是因为这位导游本身变得越来越受欢迎?”

以下是研究人员发现的故事,通过简单的语言进行了拆解。

问题所在:“上升浪潮”带来的混淆

想象一下,整个城市正在经历大规模的人口激增。仅仅因为城里的人变多了,每一家店都在获得更多的顾客。

  • 陷阱: 如果一位店主说:“这个月我们的顾客增加了5倍!我们的新招牌一定起作用了!”那他可能错了。也许招牌确实有帮助,但也可能他只是运气好,因为整个城市都在增长。
  • 研究目标: 研究人员想要将“招牌效应”(他们的优化工作)与“城市增长效应”(平台的流行程度)区分开来。

实验:一个“孪生”城市策略

研究人员研究了一个名为 Glasp 的特定网站(可以把它看作是一个关于 YouTube 视频摘要的巨大图书馆)。

  • 实验组: 他们对图书馆的一个特定部分(YouTube 摘要)进行了“大改造”,时间是在 2026 年 1 月。他们重写了标题使其看起来像问题,修复了重复页面,并使摘要对 AI 导游更加清晰。
  • 对照组(孪生体): 他们让图书馆的其余部分保持原样。没有进行任何更改。
  • 为什么这行得通: 因为这两个组都在同一个建筑内(同一个网站),它们都会感受到完全相同的“城市增长”。如果经过改造的部分比未受改动的部分增长得更快,那么那部分额外的增长很可能是由于改造引起的,而不是仅仅因为城市变大了。

大改造(他们实际做了什么)

研究人员对 YouTube 页面应用了一套组合拳式的四项更改:

  1. 清理地址: 确保每个视频都有唯一的网页地址(没有重复项)。
  2. 倾听机器人的声音: 当 AI 机器人尝试访问不存在的页面时,研究人员创建了新的页面以匹配这些机器人正在寻找的内容。
  3. 重写标题: 将标题改为问题的形式,并在顶部添加简短、清晰的答案。
  4. “安全网”: 他们承诺不会更改那些在谷歌搜索上表现良好的页面,以免意外损害现有的流量。

结果:实际发生了什么?

1. 原始数字具有误导性
如果你只看经过改造的页面,它们的规模增长了 6.1 倍。这听起来非常惊人!但未经改动的页面也增长了 3.5 倍,仅仅是因为 AI 导游(ChatGPT)的用户量在增加。

  • 类比: 如果你经营着一个柠檬水摊位,销量增长了 6 倍,但你的邻居(谁也没做任何改变)的摊位也因为全社区遭遇热浪而增长了 3.5 倍,你就不能把所有的增长都归功于你自己。

2. 真正的“大改造”效应
在减去“邻居的增长”后,研究人员发现实际的改造成效是 1.8 到 2.3 倍的增长

  • 注意点: 虽然这是一个稳健的提升,但统计测试有些不稳定,因为“之前”的数据较短且存在噪音。研究人员称这一结果为**“暗示性的”**,而非 1 100% 确定的证明。这是一个强烈的暗示,但不是板上钉钉的保证。

3. 安全网发挥了作用
研究人员曾担心,为了 AI 导游而修改页面可能会破坏他们在传统地图(谷歌搜索)上的表现。

  • 结果: 传统流量略有下降,但那是因为所有人的流量在那一年都略有下降。研究人员的改变并没有导致特别的崩溃。他们成功地在为新导游进行优化的同时,没有破坏旧地图。

核心启示

这篇论文教给我们关于营销和数据的一个宝贵教训:不要被“平台顺风车”所迷惑。

当一项新技术(如 AI 回答引擎)爆发式流行时,所有人都会获得助力。如果你看到一家企业声称“因为我们的 AI 策略,我们增长了 10 倍”,他们可能只是在顺应平台自身流行所带来的浪潮。

要了解你的策略是否真的有效,你需要将你的结果与一个“对照组”进行比较——这个对照组虽然没有做出改变,但仍然在享受同样的浪潮。在这种情况下,该策略真正的魔力在于稳健的 ~2 倍提升,而不是标题里抓眼的 6 倍 数字。

简而言之: 新的 AI 导游很棒,针对他们进行优化确实有帮助,但你必须小心,不要把仅仅因为出现在门口的人群规模扩大而带来的增长,全都归功于你自己的努力工作。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →