Does Open Peer Review Correlate With Better Altmetric Attention Performance?An Empirical Analysis Based on Nature Communications
傾向スコアマッチングを用いた『Nature Communications』誌の35,852本の論文に対する実証分析に基づき、本研究は、オープン査読がアルトメトリック・アテンション・スコアの高さと有意に相関していることを示しており、透明性の高い査読プロセスが科学的研究の社会的インパクトと公的な普及を促進することを示唆している。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
現代の科学の世界において、論文の旅は印刷されて終わりではありません。出版された研究は、ソーシャルメディアでの注目、ニュース記事での言及、政策文書での議論といった、膨大なノイズの多い「注目の市場」へと入り込み、人々の目を引くために競い合います。このような公的な広がりを測定するために、研究者たちは「アルトメトリクス（altmetrics）」と呼ばれる新しい一連のツールを開発してきました。他の科学者が自身の著作の中でその論文をどれほど引用したかを数える伝統的な引用とは異なり、アルトメクスは、研究がいかに広く一般の世界へと拡散したかを追跡します。これらのスコアは、ツイートから政府の報告書に至るまで、あらゆるものを捉える「社会的影響力の温度計」として機能します。同時に、科学者が新しい研究を評価する方法も変化しつつあります。何十年もの間、標準的なプロセスは、論文が日の目を見る前に匿名の専門家が原稿を批判するという、閉ざされた部屋のようなものでした。しかし、「オープン・ピアレビュー（公開査読）」として知られる新しいアプローチは、査読者の名前や書かれた報告書を公にすることで透明性を促します。この変化は信頼と責任を築くことを目的としていますが、実用的な疑問が生じます。すなわち、査読プロセスを公開にすることが、実際に論文がより多くの人々に届く助けとなるのか、それとも単に専門家向けの技術的な詳細に留まるだけなのか、という点です。
ある研究チームは、数千件の科学論文のデジタル・フットプリントを調査することで、この問いに答えようと試みました。彼らは、2016年以降、著者が査読プロセスの公開を選択できる仕組みを採用している主要なジャーナルである『Nature Communications』に焦点を当てました。このユニークな設定は、自然実験の場となりました。数年間にわたり、このジャーナルは、査読履歴が非公開の論文と公開された論文の2種類を並行して出版してきました。研究者たちは、2016年から2022年の間に発表された35,852件の研究論文に関するデータを収集しました。彼らは、オープン・ピアレビューが行われた論文が、研究のテーマ、著者数、あるいは論文の発表時期といった、人気に影響を与える可能性のある他の要因を考慮した上で、非公開の査読による論文よりも一貫して公衆やメディアから多くの注目を集めているかどうかを知りたいと考えました。
公平な比較を行うために、研究者たちは、各オープン・レビュー論文に対して、それ以外のあらゆる点でほぼ同一であるクローズド・レビュー論文を組み合わせる統計的手法を用いました。これは、同じ年齢、身長、トレーニングレベルを持つ2つのランナーのグループを並べ、一方のグループには特別な靴を履かせ、もう一方は履かせないという状況を想像してみてください。この手法は、靴の効果だけを分離して特定するのに役立ちます。このように論文をマッチングさせることで、チームはオープン・レビュー自体が違いを生むかどうかを確認できました。その結果、オープン・ピアレビューが行われた論文は、確かに世論において優れたパフォーマンスを示すことがわかりました。平均して、これらの論文はより高い注目スコアを獲得しており、その差は研究者が論文の主題、長さ、および関与した国の数を制御した後でも有意なまま残りました。研究は、オープン・レビューのプロセスが論文の可視性に測定可能なブーストを与えたことを算出し、透明性が「研究所」と「リビングルーム」の間の架け橋として機能していることを示唆しています。
研究者たちは、なぜこのようなことが起きているのかを探りました。一つの可能性は、公衆に対するゲートキーパー（門番）として機能するジャーナリストやサイエンス・コミュニケーターが、研究の査読プロセスを見ることができる場合に、その研究を取り上げることに自信を持てるのではないかということです。記者が実際のコメントを読み、誰がその科学を保証したのかを見ることができれば、そのストーリーはより信頼でき、信頼しやすいものになります。この透明性が、メディア機関にストーリーを拾い上げさせ、より広い聴衆へと共有することを促すのかもしれません。もう一つの要因は、オープン・ピアレビューのプロセスが、著者により明快な執筆を促す可能性があることです。自身の批判者の名前と言葉が公開されることを知っていれば、査読者はより建設的なフィードバックを提供し、著者は執筆内容を非専門家にとっても親しみやすいものへと洗練させるかもしれません。この明快さが、最終的な論文を一般の人々にとって理解しやすく、共有しやすいものにする可能性があります。
しかし、この研究は、この肯定的な発見に対して重要なニュアンスも提示しています。研究者たちは、オープン・レビューを持つことが「バイラルな有名人」になるための魔法のチケットではないと指摘しました。彼らのデータセットにおいて、2万ポイント近い注目を集めた最も人気のある論文は、オープン・ピアレビューを使用していませんでした。これは、オープン・レビューが平均的には助けにはなるものの、論文の究極の到達範囲は依然としてその内容やテーマの性質に大きく依存していることを示唆しています。さらに、研究者たちは、高い注目スコアが必ずしも公衆がその科学を愛していることを意味するわけではないと指摘しました。時には、高いスコアは論争や激しい議論から生まれることもあります。オープン・レビューは科学的な意見の相違を露呈させ、批判者を惹きつけ、賞賛と同じくらい数字を押し上げる議論を引き起こす可能性があります。スコアは注目される「量」を測定するものであり、必ずしも受け入れられ方の「質」を測るものではありません。
著者らは、オープン・ピアレビューは科学の到達範囲を広げるための強力なツールではあるものの、より大きなコミュニケーションのエコシステムの一部として捉えられるべきであると結論付けました。ジャーナル編集者にとって、この知見は、著者が平易な言葉で仕事を説明できるよう支援することを条件に、オープン・レビューを推奨することが、公衆とつながるための戦略的な方法になり得ることを示唆しています。科学的な成功を評価する人々にとって、この研究は、ソーシャルメディアの注目が複雑な指標であるということを思い出させてくれます。それは、純粋な関心、好奇心、そして論争が混ざり合ったものです。研究は、査読プロセスにおける透明性が、より大きな公衆の関与と相関していることを裏付けており、科学が「象牙の塔」から脱却して公的な会話へと踏み出すための新しい道を提示していますが、それは情報の消費の限界と現実を明確に理解した上でのことです。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。