Large Language Models as Implicit Sociological Models: Reconstructing Voting Behaviour from Sociodemographic Profiles
本文提出了一种将大语言模型视为隐性社会学工具的方法论框架,用于从社会人口统计特征中重构聚合投票行为,证明了其在准确复制现实世界选举结果和政治结构方面的能力,同时突显了其作为计算社会科学探索性工具的效用。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
在研究人们如何投票的过程中,政治学家长期以来一直依赖于一个简单的真理:你的身份往往预示了你的投票倾向。一个人的年龄、受教育程度、收入以及居住地,构成了一个与他们的政治选择密切相关的统计特征。几十年来,研究人员通过调查问卷来绘制这些联系,询问成千上万的人关于他们的生活和选票的问题,以寻找塑造选举的模式。但随着数字时代的到来,一个新问题出现了:一个经过训练的计算机程序,通过阅读互联网上浩如烟海的人类文字,是否在从未向任何人提问的情况下,就已经掌握了这些模式?大型语言模型——即现代聊天机器人背后的强大人工智能系统——是通过阅读数十亿份文档构建而成的。在此过程中,它们吸收了人类文化的统计规律,包括个人背景与政治倾向之间那些不言而喻的联系。这提出了一个迷人的可能性:这些模型是否可以作为社会的压缩镜像,仅仅因为它们阅读了大量相关内容,就持有一个关于人口统计特征如何转化为选票的隐藏地图?
来自捷克共和国的一个研究小组决定利用 2021 年捷克议会选举作为实验室,来测试这一想法。他们并没有要求人工智能预测选举的获胜者,也没有让它解释为什么某个特定的人选择了某个政党。相反,他们将这些模型视为一种社会学工具,一种从底层重建国家集体行为的方式。研究人员获取了一份包含近 4,000 名捷克公民的真实调查数据,每位公民都有详细的年龄、性别、受教育程度、收入甚至对政治兴趣的资料。他们将这些描述逐一输入到四个不同版本的语言模型中。对于每一个人,模型都被问及一个简单的问题:基于这个特定的生活故事,你会投给谁?模型不仅仅是选择一个政党;它还计算了投票给每个主要政党的概率,以及该人完全不投票的可能性。
随后,研究人员将这些成千上万次的个人猜测组合成一张单一的国家图景。他们使用了一种将每个概率视为“部分选票”的方法,使最终结果能够从许多微小的确定性中浮现,而不是通过单一的强制选择得出。当他们将这种模拟选举与实际官方结果进行对比时,匹配度惊人地接近。模型重现最终得票率的平均误差仅为 2.5 个百分点左右,这一准确度足以媲美专业机构进行的优质选前民调。更重要的是,这次模拟不仅得到了正确的数字,还捕捉到了捷克政治的隐藏结构。模型正确地识别出某些政党自然地聚集在一起,形成了两个截然不同的政治阵营,这反映了该国现实世界中的盟友关系与竞争关系。它们还重现了选民在政党之间流动的特定方式,表明人工智能在未被告知的情况下,理解了为何某一联盟的选民经常转向另一方,而对立阵营的选民则很少跨越分歧。
研究表明,模型的规模至关重要。更大、更强大的人工智能版本能够更好地区分不同类型的选民,捕捉到年轻受教育者与年长低受教育者在投票方式上的细微差别。较小的模型则倾向于预测所有人的平均值,从而忽略了人口统计景观中的细微差别。然而,即使是较小的模型也成功恢复了政治版图的大致轮廓。研究人员还检查了模型在获得具体个人细节之前的知识储备。他们发现,模型已经具备了对选举结果的强大内置知识,这很可能是因为选举结果在它们接受训练的文本中被频繁讨论。然而,这项实验的真正价值不在于这种预先存在的知识,而在于分解这种知识的能力。通过输入个人资料,研究人员可以观察模型如何将这些知识分布到不同的地区和社会群体中,有效地将一个静态的事实转化为了一个动态的、具有结构的社会地图。
至关重要的一点是,作者强调这并不是一个预测未来或取代人类调查的工具。这些模型并不理解人们为什么这样投票;它们没有关于人类决策过程的因果理解。它们仅仅是在反映它们在训练文本中所看到的模式。如果互联网上充满了将教育程度与特定政党联系起来的文章,模型就会学习这种联系。这项工作的价值在于其作为一种诊断工具的能力,允许科学家去审视模型吸收了哪些人类文化。它表明,尽管这些系统主要是在英语数据上进行训练的,但它们已经内化了非英语母语、多党制民主国家的社会学规律。研究人员总结道,虽然这些模型并非现实的完美镜像,但它们足以重建一个社会政治行为的骨架,为探索“我们是谁”与“我们如何投票”之间的隐藏联系提供了一种新的途径。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。