Who Checks the Checkers? Exploring Source Credibility in Twitter's Community Notes
本研究は、Twitterのコミュニティノートを分析することで、同プラットフォームのランキングアルゴリズムがユーザーの同意に影響を与えるためにソースの事実性を効果的に活用している一方で、クラウドソーシングによるファクトチェックのプロセスにおいては、ソースの選択および使用パターンに左派寄りのバイアスが存在することを明らかにするものである。
原論文は CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
Twitter(現在のX)を、誰もがニュースや意見、噂を叫んでいる、巨大で混沌とした「町の広場」だと想像してみてください。かつて、誰かが嘘を叫んだとき、少数のプロの司書(専門のファクトチェッカー)がそれを止めようとしていました。しかし、毎秒膨大な量の叫び声が上がっているため、司書たちは追いつくことができませんでした。
そこで、Twitterは「コミュニティノート」を導入しました。これは「近所の防犯パトロール」のようなものです。単なる司書だけでなく、一般市民もステップアップして、ある叫び声が嘘であることを指摘し、その理由を証拠となるリンクと共に説明することができます。
あなたが共有した論文は、非常に重要な問いを投げかけています。「チェックしているのは、誰がチェッカーをチェックしているのか?」、つまり、一般市民が誤情報を訂正するためにノートを書くとき、彼らはどのような「証拠(情報源)」を使っており、その証拠自体に隠れたバイアス(偏り)はないのか?という問いです。
以下は、研究者が発見した内容を、簡単な比喩を用いて解説したものです。
1. 「定番」の情報源(お気に入りの本)
近所の住民たちが訂正ノートを書くとき、彼らはどこから事実を得ているのでしょうか?
- 有力な情報源: 最も人気のある2つの情報源は、Twitter自身(あるツイートが正当であることを証明するために他のツイートを引用すること)と、Wikipediaです。これは、近所の住民が「あなたがTwitterでそれを見たのは知っていますが、別のツイートではこう言っていますよ」と言ったり、「コミュニティ百科事典をチェックしましょう」と言ったりするようなものです。
- ニュースメディア: 外部のニュースへのリンクを貼る場合、彼らは主に左派寄りのニュースソース(BBCやロイターなど)を使用しています。
- スペシャリスト: 科学や健康に関しては、政府機関や研究グループ(WHOやCDCなど)に大きく依存しています。
2. 証拠の持つ政治的な「風味」
研究者たちは、これらの情報源の「風味」を味わい、バイアスがあるかどうかを調べました。
- 左派寄りの傾向: 使用されている情報源の大部分は、中道左派であり、かつ高い事実性を持っています。これは、訂正ノートを書いている人々の多くが、図書館の「左側」にある本を使い、それらの本が一般的に非常に正確であるような町を想像してみてください。
- 右派側の問題: 情報源が右派寄りになると、それらは低い事実性を持つ傾向があります。それは、まるで「右側」の図書館には、真実とフィクションが混ざり合った本が多いようです。
- 「中道」のパラドックス: 興味深いことに、完全に中立な(センターの)情報源は、ツイートを反論(否定)するために最も頻繁に使われる一方で、偏った情報源はツイートを支持するために使われることがあります。
3. 「有用性」のテスト(裁判官の槌)
Twitterには、どのノートが「役に立つ(Helpful)」か、そしてどのノートが「役に立たない(Not Helpful)」かを決定する特別なアルゴリズム(デジタルな裁判官)があります。
- 質が重要: 裁判官は賢いです。高品質で事実に基づいた情報源を使用しているノートは、「役に立つ」とマークされます。低品質な情報源を使用しているノートは、「役に立たない」とマークされます。
- バイアスの盲点: ここにひねりがあります。裁判官は、たとえ左派や右派の偏った情報源を使用していたとしても、その情報源が事実に基づいている限り、そのノートを「役に立つ」と判断する傾向があります。しかし、もしノートが右派寄りで、かつ低品質な情報源を使用していた場合、それは拒否されます。
- 支持 vs 反論: 研究者は、ある疑わしい発見をしました。ツイートを支持(擁護)しようとするノートは、右派寄りのソースや低品質なソースを使用する傾向が高いのです。これは、不確かな証拠を使って噂を擁護しようとする近人のグループがいる一方で、噂を論破しようとするグループは堅実で高品質な証拠を使っているようなものです。
4. 「同意」のメーター(群衆の頷き)
最後に、研究者たちは群衆がどの程度ノートに同意しているかを調査しました。
- 真実は勝つ: 高い事実性を持つ情報源を使用しているとき、群衆はそのノートに同意します。
- 右派側の摩擦: 右派寄りのソースを引用しているノートは、群衆から最も低い同意を得ていました。人々はそれらに頷くことを嫌いました。
- 中道のスイートスポット: 中道または左派寄りのソースを引用しているノートは、高い同意を得ていました。これは、この特定の環境において、群衆が右派よりも中立または左派の事実をより信頼していることを示唆しています。
総括
この研究は、結論として、「近所の防犯パトロール(コミュニティノート)」は低品質なゴミをフィルタリングするという点ではうまく機能していますが(アルゴリズムは機能しています!)、そこには「誰がチェックを行っているのか」という構造的なバイアスが存在すると述べています。
「チェッカー」たちは主に、左派寄りで高品質な情報源を使用しています。これは、プラットフォームのファクトチェックのエコシステムが、意図せずしてある特定の政治的視点を優遇している可能性があることを意味します。それは、近所の住民が嘘をついているということではなく、彼らが借りている図書館が、主に政治的スペクトルの片側の本で構成されているということです。
要約すると: このシステムは、悪い事実を見つけ出すことには長けていますが、その事実を見つけ出すために使われる「事実」は、インターネットの特定の、左派寄りのコーナーからやってくるものです。
自分の分野の論文に埋もれていませんか?
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。