Developing an AI Assistant for Knowledge Management and Workforce Training in State DOTs

本文提出了一种结合多智能体架构与开放权重视觉语言模型的检索增强生成(RAG)框架,旨在通过整合文本与图表知识、实现迭代式质量评估,来解决州交通部门在知识管理与 workforce 培训中面临的专家经验流失及信息检索低效等挑战。

Divija Amaram, Lu Gao, Gowtham Reddy Gudla, Tejaswini Sanjay Katale

发布于 2026-03-05
📖 1 分钟阅读☕ 轻松阅读

Each language version is independently generated for its own context, not a direct translation.

这篇论文讲述了一个非常实用的故事:如何给美国各州的交通部门(State DOTs)装上一个“超级智能大脑”,帮他们解决“老员工退休带走经验”和“新员工找不到资料”的两大难题。

想象一下,交通部门就像是一个巨大的、拥有百年历史的老图书馆。图书馆里堆满了成千上万本关于修路、铺沥青、桥梁维护的说明书、技术报告和图表。

1. 遇到的麻烦:图书馆的“混乱”与“失忆”

  • 老员工退休(知识流失): 以前,修路的关键技巧都藏在老工程师的脑子里。现在他们退休了,就像图书馆的管理员一个个离开,带走了很多“只可意会不可言传”的绝活。
  • 资料太难找(信息碎片化): 剩下的资料太乱了。有的写在厚厚的 PDF 里,有的画在复杂的图表中。新员工想查“怎么修补路面裂缝”,可能要在几千页文档里翻半天,甚至根本找不到。
  • 图表是“哑巴”: 很多关键信息(比如哪种材料更耐用)是画在图表里的。传统的电脑系统只认识文字,看不懂图表,导致这些重要信息被“视而不见”。

2. 解决方案:打造“多特工智能助手”

为了解决这些问题,作者们开发了一个基于AI(人工智能)的助手。我们可以把它想象成图书馆里新招聘的一支精英特工队,而不是一个只会死记硬背的机器人。

这支特工队由几个不同分工的“特工”组成,他们像玩接力赛一样工作:

  • 🕵️‍♂️ 侦探特工(检索员): 当有人问问题(比如“沥青路面寿命多久?”),他首先去图书馆里翻找相关的文件。
  • 🎨 翻译特工(视觉专家): 这是最厉害的一点!如果资料里有一张复杂的图表,这位特工会拿着“放大镜”(视觉语言模型),把图表里的数据、趋势和结论,翻译成通俗易懂的文字描述。这样,AI 就能“读懂”图表了。
  • 📝 作家特工(生成员): 拿到侦探找来的文件和翻译好的图表描述后,他负责把答案写得清晰、有条理,并且根据找到的资料来写,绝不瞎编乱造(防止 AI 幻觉)。
  • 🧐 质检特工(评估员): 他负责检查作家写的答案好不好。如果答案太模糊、没说到点子上,或者没看懂图表,他会把答案打回去,并告诉作家:“这里没讲清楚,再改改!”
  • 🔍 优化特工(追问员): 如果质检特工觉得问题本身问得太模糊,导致找不到资料,这位特工会帮提问者把问题重新梳理得更精准,然后让侦探重新去翻书。

这个过程会循环进行,直到答案完美为止。 这就像是一个经验丰富的导师带着几个徒弟,反复打磨一个答案,而不是像以前那样,问一次就扔出一个可能不准的答案。

3. 实战演练:在“修路”领域大显身手

为了测试这个系统,作者们收集了500 多份来自各个州交通部门的真实技术文档(涵盖了从 90 年代到 2024 年的资料),并提出了100 个关于路面维护的具体问题(比如“这种路面处理能管几年?”、“成本多少?”)。

结果非常惊人:

  • 找得准: 在给出的前 3 个搜索结果中,100% 都是真正相关的资料(Precision@3 = 1.0)。
  • 找得全: 在所有相关的资料中,系统能在前 3 个结果里找到 94.4% 的关键信息(Recall@3 = 94.4%)。

相比之下,如果只用普通的“一次过”搜索系统(没有特工队反复打磨),很多关键资料会被漏掉。

4. 总结与未来

这个系统的核心价值在于:
它不仅仅是一个聊天机器人,它是一个基于证据的决策助手。它能把藏在图表里的秘密挖出来,把老工程师的经验通过文档“复活”,让新员工能像专家一样快速找到答案。

目前的局限与未来:

  • 局限: 目前主要测试的是“修路(路面工程)”领域,还没扩展到桥梁、交通信号等其他领域。而且,把图表变成文字目前还需要人工辅助(比如人工截图),还没完全自动化。
  • 未来: 作者计划把这个“超级大脑”推广到交通部门的更多领域(如交通安全、资产管理),并尝试让图表处理完全自动化,让它真正成为交通部门不可或缺的“全能管家”。

一句话总结:
这就好比给交通部门配了一个既懂看图、又会反复推敲、还能把复杂技术文档变成大白话的“超级实习生”,让修路养路的工作变得更聪明、更高效,不再因为人员流动而“断档”。