Generative AI for Analysts
通过利用 2023 年生成式人工智能集成至 FactSet 这一自然实验,本研究揭示了尽管该技术显著丰富了金融分析师报告的广度与时效性,但它同时也使人类注意力成为了一个新的瓶颈,导致在信息处理需求较高的情况下,即便拥有更优质的基础数据,预测准确度仍有所下降。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
在金融领域,专业分析师扮演着投资者重要向导的角色。他们的职责是将海量且混乱的金融数据——包括盈余报告、市场趋势和经济新闻——提炼成清晰且具有操作性的建议。几十年来,这项工作一直受限于一个简单的、人类自身的局限性:一个人在一天之内所能阅读、理解并综合的信息量是有限的。即使是最优秀的分析师,其注意力和时间也是有限的。当数据的增长速度超过了人类大脑的处理能力时,最终建议的质量就会受到影响。这正是这项新研究所探讨的核心谜题:当一种强大的新工具出现,能够瞬间收集并整理出远超任何人类所能处理的信息量时,会发生什么?
研究人员由 Jian Xue、Qian Zhang 和 Wu Zhu 领导,他们通过观察 2023 年底的一个特定时刻来探讨这个问题。一家名为 FactSet 的大型金融数据公司推出了一款名为 Mercury 的新型人工智能系统。该工具旨在帮助分析师更快地寻找信息、自动创建图表并起草报告。由于 FactSet 将这一工具免费提供给其现有用户,研究人员得以进行一次自然实验。他们对比了在使用 FactSet 的分析师在 AI 到来之前与到来之后撰写的研究报告。他们不仅观察了报告是否变得更长,还利用先进的语言模型阅读了数千份报告中的每一个词、每一张表格和每一张图表,以精确统计使用了多少种不同的信息源、涵盖了多少种不同的主题以及应用了多少种不同的分析方法。
结果揭示了工作本身发生的显著转型。在引入 AI 工具后,与 FactSet 相关的报告变得更加丰富。这些报告包含的独特信息源增加了 26%,涵盖的主题范围扩大了 24%,应用的分析方法也增加了 21%。此外,报告的发布速度也更快了,通常在公司发布盈余公告后的三天内即可发表。AI 成功消除了寻找和整理数据的瓶颈。分析师不再为寻找正确的数据而苦恼;他们正在呈现对所覆盖公司更广泛、更深入的视角。
然而,当研究人员观察预测的准确性时,故事发生了令人惊讶的转折。尽管报告变得更加丰富且发布更快,但预测的相对准确性实际上却下降了。使用该 AI 工具的分析师在盈和预测方面的精确度低于未使用该工具的同行。这一发现挑战了一个普遍假设,即更多的信息总是能带来更好的决策。研究人员进行了深入调查以了解原因。他们发现,准确性的下降并非均匀分布;它集中在那些本就承受着最大压力的分析师身上。那些负责覆盖大量公司、在缺乏支持的小型团队中工作、或是在同一天内试图更新多家公司预测的分析师,其表现下降最为明显。
研究表明,问题不在于 AI 提供的信息质量,而在于人类处理信息的能力。当 AI 工具将大量的资料交给分析师时,它同时也给了他们沉重的认知负荷。分析师必须去验证、优先排序并理解那些他们以前从未需要应对的冲突信号。对于那些时间与注意力有限的人来说,这种过载导致了混乱和错误。为了证明这一点,研究人员构建了一个计算机模型,该模型处理与报告中完全相同的信息。与人类分析师不同,计算机不会感到疲劳或分心。当机器处理这些新的、更丰富的数据时,其准确性并未下降。这证实了信息本身依然是优质的,瓶颈只是从“寻找数据”转移到了“理解数据”。
研究人员还排除了其他几种可能性。他们检查了 AI 是否在生成毫无意义或“幻觉”式的事实,发现报告中的数据与之前一样可靠。他们检查了报告是否仅仅变得更长或更具重复性,发现并没有出现无用的文本增加。他们甚至测试了分析师是否为了赶进度而匆忙完成工作,但准确性的下降并不局限于那些最快的报告。证据始终指向同一个结论:该工具扩展信息供应的速度超过了人类大脑吸收信息的速度。
这一发现为职场中的人工智能提供了一个细致入微的视角。它表明,虽然 AI 可以通过处理繁重的数据收集工作来显著提高生产力,但它并不自动提升决策水平。事实上,如果人类使用者已经精疲力竭,增加信息反而会适得其反。这项研究暗示,为了让 AI 真正发挥作用,组织可能需要重新设计员工的工作方式。与其仅仅给分析师提供更多工具,不如给他们更多的时间、更小的业务量,或者建立更好的系统来帮助他们筛选海量的新信息。技术的价值不仅取决于机器能生成什么,更取决于人类理解这些内容的能力。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。