Much of Geospatial Web Search Is Beyond Traditional GIS
通过分析超过一百万条真实世界搜索查询并结合先进机器学习技术,本文揭示出地理空间网络搜索主要受成本、营业时间等实用性交易需求的驱动,其范围远超传统地理信息系统,从而呼吁构建混合检索架构并更新大语言模型中地理推理的基准测试。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象互联网是一座巨大而混乱的图书馆,人们在这里不仅寻找书籍;他们还会询问事物位于何处、特定地点的物品价格是多少,以及某个城镇的天气如何。长期以来,图书管理员(传统地理信息系统,或 GIS)认为他们只需关注那些明确提及城市名称或坐标的问题,例如“巴黎在哪里?”
本文认为,图书管理员一直找错了书架。他们忽视了人们实际提出的绝大多数问题,这些问题关乎地点,但并不总是听起来像“地理”问题。
以下是研究人员所做工作及发现结果的简要说明,采用简单的类比:
1. 宏大的“地点”统计
研究人员从 Bing(MS MARCO 数据集)中提取了 100 万条真实搜索查询的巨大堆栈。这就像一大桶水。
- 旧方法: 以往的研究试图通过查找特定关键词(如“城市”、“州”或“国家”)来寻找“地点”问题。他们发现,桶中只有约 6% 的水是“地点”水。
- 新方法: 研究人员使用了一种智能 AI 工具(“句子嵌入”模型),它能理解句子的含义,而不仅仅是词语。他们询问 AI:“这个问题是否需要关于地球上特定地点的知识才能回答?”
- 结果: AI 发现,18% 的查询实际上与地点相关。这几乎是此前任何人认为的数量的三倍。
2. 人们实际上在问什么?
研究人员随后将这 18 万多个“地点”问题分类到一个拥有 88 个不同抽屉的巨大文件柜中。他们发现,人们主要问的并不是关于山脉、河流或政治边界(传统 GIS 系统为之构建的内容)的问题。
相反,最顶部的抽屉里装满了实用且交易性的问题:
- “钱包”抽屉(15.3%): 关于成本、价格和税收的问题。(例如:“奥斯汀的租金是多少?”或“巴西的货币是什么?”)。仅这一类别就几乎是整个物理地理类别(山脉、河流等)的两倍大。
- “时钟”抽屉(10.7%): 关于时间、季节和营业时间的问题。
- “电话簿”抽屉: 关于联系方式和地址的问题。
隐喻: 想象一个仅用于显示海岸线形状和国家公园位置的 GPS 系统。现在想象一位用户试图用该 GPS 寻找最近的营业药店、查询汽油价格,或查看餐厅是否在周日营业。旧系统将彻底失败,因为它并非为这些问题而构建。本文指出:“嘿,大多数人实际上是想用 GPS 找药店和查油价,而不是看海岸线!”
3. 系统中的“噪音”
当他们尝试对这些问题进行分类时,约 36% 的问题无法整齐地归入任何一个单一抽屉。研究人员称此为“噪音”。
- 类比: 想象试图按颜色整理一堆混杂的乐高积木。有些积木形状奇特或拥有多种颜色,因此无法完美地放入“红色”或“蓝色”的盒子中。研究人员承认,真实的人类语言是混乱的,有些问题过于模糊或复杂,无法强行归入单一类别。
4. 两种不同类型的回答
本文强调了这些问题在回答方式上的关键分歧:
- “事实”类问题: 有些问题只有一个正确答案,且永不改变。
- 示例: “肯塔基州伯灵顿的邮政编码是多少?”或“从伦敦到巴黎有多远?”
- 解决方案: 这些问题可以通过刚性数据库回答,就像数字电话簿。
- “判断”类问题: 其他问题则取决于观点、时间或变化的数据。
- 示例: “访问夏威夷的最佳时间是什么时候?”或“哪家餐厅同时提供墨西哥菜和牛排?”
- 解决方案: 这些需要一个更灵活的系统,能够查看评论、当前天气或每天变化的菜单。
5. 这对未来技术为何重要
作者得出结论,如果我们想构建更好的搜索引擎或聊天机器人(就像我们今天使用的那些),就不能仅仅依赖老式地图。
- 问题: 当前系统通常以相同的方式处理所有“地点”问题。
- 解决方案: 我们需要“混合”系统。这些系统应知道何时从数据库中提取硬性事实(如邮政编码),以及何时使用更灵活、实时的系统来回答关于访问某地的最佳时间或某物当前价格的问题。
总结
简而言之,本文是一记警钟。它告诉我们,当人们在网络上搜索“地点”时,他们主要寻找的是金钱、时间和实用细节,而不仅仅是地图和地貌。为了为他们构建更好的工具,我们需要停止寻找地名,转而理解问题背后的意图。研究人员已将其新的“分类系统”(分类法)和“智能分类器”(分类器)公开供任何人使用,这样我们最终就能构建出真正理解人们在询问地点时实际含义的搜索引擎。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。