Approaches to Analysing Historical Newspapers Using LLMs
该研究通过结合主题建模、针对 OCR 退化斯洛文尼亚语优化的指令跟随大语言模型情感分析、命名实体图可视化以及批判性话语分析,对 20 世纪初斯洛文尼亚历史报纸进行了混合方法研究,揭示了集体身份与政治取向在公共话语中的表征差异及其演变。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
这篇论文就像是一次**“穿越时空的侦探行动”**。
想象一下,你手里有两本巨大的、泛黄的、字迹有些模糊的19 世纪末斯洛文尼亚老报纸(一本叫《Slovenec》,另一本叫《Slovenski narod》)。这两家报纸就像两个性格迥异的“老邻居”:一家是保守的天主教派,另一家是自由进步的派别。它们每天都在争论国家该往哪里走,谁是我们的朋友,谁又是我们的敌人。
但是,这两本报纸加起来有几百万字,而且因为年代久远,扫描出来的文字(OCR)有很多错别字和乱码。人类侦探就算不吃不喝,花上几十年也读不完,更别提从中找出规律了。
于是,研究团队请来了一位**“超级 AI 助手”(大型语言模型,LLM),并给它配备了一套“数字显微镜”**,试图从这些混乱的文字中,看清那个时代人们是如何看待“我们是谁”以及“我们属于哪里”的。
以下是他们具体是怎么做的,以及发现了什么:
1. 给 AI 戴上“翻译眼镜”和“情绪探测器”
首先,AI 需要读懂这些模糊的旧文字。研究人员并没有让 AI 去死记硬背,而是给它一个**“任务清单”**:
- 找名字:识别出文中提到的群体(比如“德国人”、“奥地利人”、“斯洛文尼亚人”)。
- 测情绪:判断报纸提到这些群体时,是夸奖(正面)、骂人(负面),还是只是陈述事实(中性)。
这就好比给 AI 戴上了一副**“情绪滤镜”**。当它读到“德国人”时,它能立刻感觉到:“哦,这两家报纸都在骂德国人,情绪很激动!”;而当它读到“奥地利人”时,它发现:“嗯,这里只是客观报道,没什么情绪。”
关键发现:
研究人员测试了四个不同的 AI 模型,发现其中一个是斯洛文尼亚语特制的“本地通”(GaMS3 模型)表现最好。但它也不是完美的:
- 它很擅长识别**“中立”**(比如“德国人来了”这种事实)。
- 它有点**“过度敏感”**,容易把一些中性描述误判为“负面”。
- 它有点**“迟钝”**,很难识别出真正的“正面”夸奖。
- 比喻:就像一位性格谨慎的侦探,他很少冤枉好人(很少把中性误判为负面),但他也不太擅长发现惊喜(很难识别出正面情感)。
2. 绘制“人际关系地图”
光看文字太累了,研究人员把 AI 找到的所有信息画成了一张巨大的“社交关系网”。
- 圆圈代表不同的群体(如德国人、意大利人)。
- 线条代表它们和地点、主题(如政治、宗教)一起出现的次数。
- 圆圈的大小代表这个群体被“骂”或“夸”得有多频繁(情绪越激烈,圆圈越大)。
通过这张地图,他们看到了什么?
- 《Slovenec》(保守派):这张网非常复杂,像一团乱麻。它和很多地点、很多群体都有纠缠,情绪波动很大。
- 《Slovenski narod》(自由派):这张网相对简单、干净,很多群体只是静静地待在那里(中性情绪),没有太多激烈的争吵。
3. 侦探的“深度访谈”(定性分析)
AI 虽然快,但它不懂“弦外之音”。所以,研究人员又拿起了**“放大镜”**,去细读 AI 标记出的关键段落。
他们发现了一些有趣的**“潜台词”**:
- “我们”vs“他们”:两家报纸都在努力构建“斯洛文尼亚人”的形象。它们最常用的策略是**“树立敌人”**。
- 德国人是主要的“反派”,两家报纸都在疯狂吐槽他们。
- 克罗地亚人却被描绘成“好兄弟”,因为大家命运相似,都要对抗德国人。
- 奥地利人则比较微妙,虽然政治上依赖,但报纸上通常只是客观报道,没有太多爱恨。
- 不同的“战场”:
- 在**《Slovenec》**的“讣告”栏目里,提到德国人时只是冷冰冰的事实,但提到克罗地亚人时却充满了赞美(“伟大的爱国者”)。
- 在**《Slovenski narod》**的“短讯”里,则更多关注学校、议会等公共事务,强调斯洛文尼亚人应该有自己的声音。
4. 总结:AI 不是替代人类,而是“望远镜”
这篇论文的核心思想是:不要指望 AI 能完全取代历史学家,但它是一个超级好用的“望远镜”。
- 以前:历史学家只能盯着几页纸看,容易“只见树木,不见森林”。
- 现在:AI 帮他们扫视了整座森林,指出了哪里可能有“宝藏”(比如某些群体总是被情绪化地讨论)。
- 最后:历史学家再拿着这些线索,去进行深度的“近距离观察”,解读出文字背后的政治博弈和文化心理。
一句话总结:
这项研究就像是用AI 这个“超级扫描仪”,把两本几百年前、字迹模糊的争吵日记,扫描成了一张清晰的**“情绪地图”**,让我们一眼就能看出那个时代的斯洛文尼亚人,谁是他们眼中的“死对头”,谁又是“好邻居”,以及他们是如何在争吵中定义“我是谁”的。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。