Neural network embeddings recover value dimensions from psychometric survey items on par with human data
本文表明，一种名为 SQuID 的处理大语言模型嵌入的新方法，能够有效地从 PVQ-RR 中恢复人类价值观的结构，其解释方差达 55%，且跨文化一致性与传统的真人调查数据相当，为心理测量研究提供了一种可扩展且具成本效益的替代方案。
原始论文采用 CC BY 4.0 许可（http://creativecommons.org/licenses/by/4.0/）。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性，请参阅原始论文。 阅读完整免责声明
想象一下，你正试图通过让一群人填写一份关于其价值观的长篇问卷，来理解这群人的“人格”。传统上，研究人员必须雇佣数千名真实的人类来阅读这些问题并评估他们对问题的认同程度。这既昂贵又缓慢，而且人们有时会感到疲劳或厌烦，从而导致数据混乱。
这篇论文提出了一个大胆的问题：计算机（具体说是大语言模型）能否阅读这些问题，并“理解”它们，从而重构出人类所创造的同一种心理图谱？
以下是他们发现的拆解，使用了简单的类比：
1. 问题所在：“仅限正面”的盲点
研究人员尝试使用 AI 来阅读这些问题，并将它们转化为数学上的“嵌入”（embeddings，即代表一个词或句子的数字列表）。
然而，他们遇到了障碍。想象你有一张价值观地图。在这张地图上，有些价值观是“朋友”（如“帮助他人”和“善良”），而有些则是“敌人”（如“帮助他人”和“自私”）。在真实的人类数据中，这些“敌人”具有负相关关系（它们向相反方向拉扯）。
但当 AI 查看这些问题时，它只看到了正相关关系。这就像是在看一张地图，上面的所有事物都是相连的，但“敌人”之间的连接却是隐形的。AI 无法看出两个概念是对立的；它只看到它们是同一事物的不同版本。这是因为 AI 模型是在海量文本上训练的，这些文本共享共同的语言模式，使得一切看起来都略微相似。
2. 解决方案：“SQuID”过滤器
为了解决这个问题，作者发明了一种名为 SQuID（调查与问卷项目嵌入差异法）的方法。
把 AI 对问题的原始理解想象成一个充满噪声的无线电信号。这个信号充满了“静电”（如“对他/她而言很重要”之类的常见词汇），使得所有东西听起来都一样。
SQuID 就像一副降噪耳机。
- 首先，研究人员提取了所有问题的“平均值”，以创建一个“背景噪声”轮廓。
- 然后，他们从每一个问题中减去这个背景噪声。
类比： 想象你正试图从一个管弦乐团中听到一种特定的乐器。如果你录制整个乐团，你会听到所有声音。但如果你录制乐团的“平均声音”，并将其从小提琴的录音中减去，剩下的就是小提琴独特的音色。
通过这个数学技巧，AI 突然开始看到了负相关关系。它终于能够分辨出“自我导向”和“从众性”是对立的，正如人类心理学家几十年来所了解的那样。
3. 结果：镜像图像
应用 SQuID 后，研究人员将 AI 的地图与来自 49 个不同国家的人类地图进行了对比。
- 拟合度： AI 的地图看起来与人类的地图惊人地相似。他们发现，AI 的方法解释了人类数据中发现的模式的 55%。
- 形状： 人类的价值观通常呈圆形排列（一个“环形结构”）。相似的价值观相邻，对立的价值观位于对面。使用 SQuID 的 AI 成功地重构了这种圆形形状，而无需被告知。
- 对比： AI 的表现与依赖人类评分者的传统方法不相上下，在某些情况下甚至略好。
4. 为什么这很重要（根据论文所述）
作者认为，这不仅仅是一个酷炫的小技巧，它是一种新的科学工具。
- 速度与成本： 你不需要等待数月让人们填写调查问卷，只需几分钟且只需几分钱就能生成这些数据。
- 可扩展性： 你可以瞬间测试成千上万个不同主题的问题。
- 验证： 它允许研究人员在雇佣哪怕一个人类参与之前，就检查一份问卷是否合理。
5. 他们没有声称的内容
需要注意的是，论文并没有说：
- 他们不是在说 AI 可以完全取代人类。人类仍然需要被研究，以提供用于对比的“地面真值”（ground truth）。
- 他们不是在声称这适用于每一种类型的心理测试（尽管他们在人格测试上也测试过，并且效果很好）。
- 他们不是在暗示 AI 拥有“感觉”或“意识”。AI 只是在数学上映射问题中的含义，而不是人类背后的心理体验。
总结
这篇论文表明，通过使用一种简单的数学“降噪”技术（SQuID），我们可以让 AI 阅读调查问卷，并产生一个与数千名人类参与者创造的图谱几乎完全相同的心理图谱。这使 AI 从一个“仅限正面”的阅读者，转变为一个能够理解人类价值观全貌（包括对立面）的工具。
您所在领域的论文太多了？
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要，使用您的语言。