Does Open Peer Review Correlate With Better Altmetric Attention Performance?An Empirical Analysis Based on Nature Communications
Basierend auf einer empirischen Analyse von 35.852 Artikeln aus *Nature Communications* unter Verwendung von Propensity-Score-Matching zeigt diese Studie, dass Open Peer Review signifikant mit höheren Altmetric-Attention-Scores korreliert, was darauf hindeutet, dass transparente Review-Prozesse die soziale Wirkung und die öffentliche Verbreitung wissenschaftlicher Forschung verbessern.
Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
In der modernen Welt der Wissenschaft endet der Weg eines Papers nicht mit dem Druck. Sobald es veröffentlicht ist, tritt die Forschung in einen riesigen, lärmenden Marktplatz der Aufmerksamkeit ein, wo sie um die Blicke in den sozialen Medien, Erwähnungen in Nachrichtenartikeln und Diskussionen in Grundsatzdokumenten konkurriert. Um diese Art von öffentlicher Reichweite zu messen, haben Forscher eine neue Gruppe von Werkzeugen namens Altmetrics entwickelt. Im Gegensatz zu traditionellen Zitaten, die zählen, wie oft andere Wissenschaftler eine Arbeit in ihren eigenen Arbeiten referenzieren, verfolgen Altmetrics, wie weitläufig eine Studie in der breiteren Welt verbreitet wird. Diese Scores fungieren als Thermometer für die soziale Wirkung und erfassen alles – vom Tweet bis zum Regierungsbericht. Gleichzeitig verändert sich auch die Art und Weise, wie Wissenschaftler neue Forschung bewerten. Jahrzehntelang war der Standardprozess ein geschlossener Raum, in dem anonyme Experten ein Manuskript kritisierten, bevor es das Licht der Welt erblickte. Ein neuerer Ansatz, bekannt als Open Peer Review, lädt zur Transparenz ein, indem er der Öffentlichkeit erlaubt, die Namen der Gutachter und deren schriftliche Berichte einzusehen. Dieser Wandel zielt darauf ab, Vertrauen und Rechenschaftspflicht aufzubauen, wirft aber eine praktische Frage auf: Hilft es tatsächlich, dass der Begutachtungsprozess offen gestaltet wird, damit eine Arbeit mehr Menschen erreicht, oder bleibt es lediglich ein technisches Detail für Spezialisten?
Ein Team von Forschern ging diese Frage an, indem es den digitalen Fußabdruck tausender wissenschaftlicher Arbeiten untersuchte. Sie konzentrierten ihre Untersuchung auf Nature Communications, eine bedeutende Fachzeitschrift, die Autoren seit 2016 die Möglichkeit gibt, zu wählen, ob sie ihren Begutachtungsprozess öffentlich machen möchten. Dieses einzigartige Setup schuf ein natürliches Experiment. Über mehrere Jahre hinweg veröffentlichte die Zeitschrift zwei Arten von Papern nebeneinander: solche, bei denen die Begutachtungshistorie verborgen blieb, und solche, bei denen sie offen war. Die Forscher sammelten Daten zu 35.852 Forschungsartikeln, die zwischen 2016 und 2022 veröffentlicht wurden. Sie wollten wissen, ob die Arbeiten mit offenen Reviews konsistent mehr Aufmerksamkeit von der Öffentlichkeit und den Medien auf sich zogen als jene mit geschlossenen Reviews, unter Berücksichtigung anderer Faktoren, die die Popularität beeinflussen könnten, wie etwa das Thema der Studie, die Anzahl der Autoren oder der Zeitpunkt der Veröffentlichung.
Um einen fairen Vergleich zu gewährleisten, nutzten die Forscher eine statistische Methode, die jedes Open-Review-Paper mit einem Closed-Review-Paper paart, das in jeder anderen Hinsicht nahezu identisch ist. Stellen Sie sich vor, man stellt zwei Gruppen von Läufern nebeneinander auf, die im Alter, in der Größe und im Trainingsniveau gleich sind, aber eine Gruppe trägt ein spezielles Paar Schuhe, während die andere dies nicht tut; diese Methode hilft dabei, den Effekt allein auf die Schuhe zu isolieren. Durch das Abgleichen der Paper auf diese Weise konnte das Team sehen, ob das offene Review selbst einen Unterschied machte. Sie fanden heraus, dass Paper mit offenen Peer Reviews tatsächlich besser in der Gerichtsbank der öffentlichen Meinung abschnitten. Im Durchschnitt erhielten diese Arbeiten einen höheren Aufmerksamkeitsscore, ein Unterschied, der signifikant blieb, selbst nachdem die Forscher das Thema, die Länge und die Anzahl der beteiligten Länder kontrolliert hatten. Die Studie berechnete, dass der Open-Review-Prozess einen messbaren Schub für die Sichtbarkeit eines Papers bewirkte, was darauf hindeutet, dass Transparenz als Brücke zwischen dem Labor und dem Wohnzimmer fungiert.
Die Forscher untersuchten, warum dies geschehen könnte. Eine Möglichkeit ist, dass Journalisten und Wissenschaftskommunikatoren, die als Gatekeeper für die Öffentlichkeit fungieren, sich sicherer fühlen, Forschung zu verbreiten, wenn sie den Begutachtungsprozess einsehen können. Wenn ein Reporter die tatsächlichen Kommentare lesen und sehen kann, wer die Wissenschaft bestätigt hat, fühlt sich die Geschichte glaubwürdiger und leichter vertrauenswürdig an. Diese Transparenz könnte Medienhäuser dazu ermutigen, die Geschichte aufzugreifen und sie einem breiteren Publikum zugänglich zu machen. Ein weiterer Faktor könnte sein, dass der Open-Review-Prozess Autoren dazu anregt, klarer zu schreiben. Da sie wissen, dass die Namen und Worte ihrer Kritiker öffentlich sein werden, könnten Gutachter konstruktiveres Feedback geben, und Autoren könnten ihre Texte verfeinern, um sie für Nicht-Experten zugänglicher zu machen. Diese Klarheit könnte das fertige Paper für die breite Öffentlichkeit leichter verständlich und teilbar machen.
Die Studie lieferte jedoch auch wichtige Nuancen zu diesem positiven Befund. Die Forscher merkten an, dass ein offenes Review kein magisches Ticket zum viralen Ruhm ist. In ihrem Datensatz erzielte das mit Abstand populärste Paper, das fast 20.000 Punkte an Aufmerksamkeit generierte, kein Open Peer Review. Dies deutet darauf hin, dass Open Reviews zwar im Durchschnitt helfen, die letztendliche Reichweite eines Papers jedoch stark von dessen Inhalt und der Art des Themas abhängt. Darüber hinaus wiesen die Forscher darauf hin, dass ein hoher Aufmerksamkeitsscore nicht immer bedeutet, dass die Öffentlichkeit die Wissenschaft liebt. Manchmal resultiert ein hoher Score aus Kontroversen oder hitzigen Debatten. Ein offenes Review könnte wissenschaftliche Meinungsverschiedenheiten offenlegen, was Kritiker anzieht und Diskussionen entfacht, die die Zahlen ebenso stark in die Höhe treiben wie Lob. Der Score misst das Volumen der Aufmerksamkeit, nicht notwendigerweise die Qualität der Aufnahme.
Die Autoren kamen zu dem Schluss, dass Open Peer Review zwar ein mächtiges Werkzeug zur Erweiterung der Reichweite von Wissenschaft ist, es jedoch als Teil eines größeren Ökosystems der Kommunikation betrachtet werden sollte. Für Redakteure von Fachzeitschriften legen die Ergebnisse nahe, dass die Förderung von Open Reviews ein strategischer Weg sein könnte, um eine Verbindung zur Öffentlichkeit aufzubauen, vorausgesetzt, sie helfen den Autoren auch dabei, ihre Arbeit in einer einfachen Sprache zu erklären. Für diejenigen, die wissenschaftlichen Erfolg bewerten, dient die Studie als Erinnerung daran, dass die Aufmerksamkeit in sozialen Medien eine komplexe Metrik ist. Sie spiegelt eine Mischung aus echtem Interesse, Neugier und Kontroverse wider. Die Forschung bestätigt, dass Transparenz im Begutachtungsprozess mit größerem öffentlichem Engagement korreliert und somit einen neuen Weg eröffnet, damit die Wissenschaft aus dem Elfenbeinturm in den öffentlichen Diskurs tritt – jedoch mit einem klaren Verständnis für die Grenzen und die Realitäten der Informationsaufnahme.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.