Demanding peer review is associated with higher impact in published science
من خلال تحليل التفاعلات المهيكلة بين المراجعين والمؤلفين في مجلة "نيتشر كوميونيكيشنز" (Nature Communications)، تكشف هذه الدراسة أن الأوراق البحثية التي خضعت لعملية مراجعة أقران أكثر صرامة — والتي تميزت بنقد أقوى، وتعليقات ذات جودة أعلى، وأعباء مراجعة أكبر — تحقق في نهاية المطاف تأثير استشهاد أعلى، مما يتحدى المفهوم القائل بأن عمليات المراجعة الأكثر سلاسة تشير إلى جودة علمية أعلى.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل عالم العلوم كأنه سوق ضخم وصاخب، حيث يحاول الباحثون بيع أفكارهم الجديدة (الأوراق البحثية) للجمهور. وقبل أن توضع الفكرة على الرف، يجب أن تمر عبر كشك صارم للغاية لمراقبة الجودة يديره "المفتشون" (المراجعون الأقران).
لفترة طويلة، اعتقد الناس أنه إذا كانت الفكرة عبقرية حقًا، فستمر عبر هذا الكشك بسلاسة مع إيماءة سريعة وكلمة "عمل رائع!" من المفتشين. كان الافتراض هو: الأفكار الجيدة = طريق سهل.
ومع ذلك، فإن دراسة جديدة أجراها "هوي هوانغ جيانغ" وزملاؤه تقلب هذا السيناريو تمامًا. لقد نظروا في آلاف الأوراق المنشورة في مجلة كبرى (Nature Communications) واستخدموا ذكاءً اصطناعيًا متطورًا (مثل أمين مكتبة فائق الذكاء) لقراءة الرسائل الطويلة والمعقدة المتبادلة بين المؤلفين والمفتشين. لقد حولوا هذه الرسائل الفوضوية إلى بيانات منظمة ليروا ما يحدث فعليًا خلف الكواليس.
إليكم ما وجدوه، مشروحًا ببعض التشبيهات من الحياة اليومية:
1. مفارقة "الحب القاسي"
النتيجة: الأوراق التي انتهى بها المطاف لتصبح الأكثر شهرة والأكثر استشهادًا (الأعمال الخارقة في العلم) كانت هي تلك التي واجهت أصعب الأوقات في عملية المراجعة.
التشبيه: فكر في الأمر كأنها تجربة أداء لفرقة روك.
- المسار السلس: تعزف الفرقة أغنية "بوب" تقليدية. يقول الحكام: "إنها جيدة، لا توجد أخطاء. إليكم عقدكم". يتم توقيع العقد للفرقة، لكن لا أحد يتذكرهم بعد عام.
- المسار الصعب: تعزف الفرقة أغنية ثورية ومعقدة. يغضب الحكام ويقولون: "الجسر الموسيقي ضعيف! كلماتك لا معنى لها! عليك إعادة كتابة المقطع الثاني بالكامل!" تدافع الفرقة عن نفسها قائلة: "لا، هذا هو جوهر الأغنية!" يجادلون، ويعيدون الكتابة، ويتعرقون، وفي النهاية يصلحون الثغرات.
- النتيجة: وجدت الدراسة أن الفرق التي مرت عبر "المسار الصعب" (واجهت نقدًا قاسيًا وعمليات إعادة كتابة مكثفة) هي التي أصبحت الحدث الكبير التالي. أما الفرق "السلسة" فكانت غالبًا منسية.
2. الجولة الأولى هي "الحدث الرئيسي"
النتيجة: كل العمل الشاق يحدث في جولة المراجعة الأولى فقط. أما الجولات اللاحقة فهي مجرد تنظيف للتفاصيل الصغيرة.
التشبيه: فكر في الأمر كأنه طهي وجبة فاخرة.
- الجولة الأولى: يتذوق رئيس الطهاة الحساء ويصرخ: "إنه مالح جدًا، واللحم نيء، وقد نسيت التوابل الرئيسية!" هنا يحدث العمل الحقيقي. يجب على الطاهي العودة إلى المطبخ، وتقطيع خضروات جديدة، وإعادة تتبيل كل شيء.
- الجولة الثانية والثالثة: يتذوق الطاهي الطعام مرة أخرى: "حسنًا، اللحم جيد الآن. ربما فقط امسح بقعة عن الطبق".
- الدرس: تظهر الدراسة أن "الضغط" يتركز بالكامل في تلك الجولة الأولى. إذا نجوت من الجولة الأولى بنقد قاسٍ، فقد أنجزت بالفعل العمل الصعب.
3. الأمر لا يتعلق بـ "كونك لطيفًا"
النتيصة: المراجعات الأكثر فائدة ليست بالضرورة هي "الألطف". في الواقع، التعليقات "البناءة" (اللطيفة والقابلة للتنفيذ) لم تتنبأ بالتأثير العالي. ما تنبأ بالنجاح هو النقد عالي الجودة والاختلاف القوي في الرأي.
التشبيه: فكر في الأمر كـ محامٍ يدافع عن موكله.
- إذا قال المحامي فقط: "كل شيء مثالي، لا توجد تغييرات مطلوبة"، فقد يعتقد الجمهور أن القضية ضعيفة أو أن المحامي كسول.
- أما إذا قال: "حجة الادعاء معيبة، ولكن إليكم الأدلة لإثبات ذلك"، ثم اضطر للقتال بقوة لإصلاح الثغرات في قضيتهم الخاصة، فإن الحكم النهائي سيكون أقوى بكثير.
- وجدت الدراسة أنه عندما تحدى المراجعون جوهر الفكرة (مثل "الحداثة" أو "المنطق") بدلاً من مجرد التنسيق، أصبحت الورقة البحثية أقوى.
4. أسطورة "حجم الفريق"
النتيجة: لا يهم إذا كنت بروفيسورًا مشهورًا من جامعة كبرى أو باحثًا شابًا من كلية صغيرة. المراجعون يعاملون الورقة البحثية نفسها، وليس الشخص.
التشبيه: فكر في الأمر كـ اختبار تذوق أعمى.
- سواء كان الحساء من صنع طاهٍ مشهور أو طاهٍ منزلي، فإن الحكام يهتمون فقط بالمذاق.
- وجدت الدراسة أن حجم فريق البحث أو مدى شهرة الجامعة لم يغير حقيقة مدى قسوة المراجعين. العملية عادلة بشكل مدهش؛ فهم يحكمون على العمل، وليس على السيرة الذاتية.
5. مجالات مختلفة، أساليب مختلفة
النتيجة: بينما يكون طول المراجعة متساويًا للجميع تقريبًا، فإن أسلوب النقد يتغير حسب الموضوع.
التشبيه: فكر في دوريات رياضية مختلفة.
- في التاريخ، قد يكون الحكام صاخبين جدًا بشأن "القصة" و"منطق" الحجة.
- في الهندسة، قد يكون الحكام مهووسين بـ "البيانات" و"التجارب".
- في الفن، قد يكون النقاش حول "المفهوم".
- تظهر الدراسة أنه لا يمكنك استخدام قاعدة "مقاس واحد يناسب الجميع" في العلوم. ما يعتبر مراجعة "قاسية" في الفيزياء قد يبدو مختلفًا تمامًا في علم الاجتماع.
الخلاصة الكبرى
إذا كنت عالمًا (أو أي شخص يبتكر شيئًا جديدًا)، فلا تصب بالذعر إذا حصلت على مراجعة قاسية. قد يكون ذلك علامة جيدة.
تشير الدراسة إلى أن المراجعة الدقيقة من الأقران تشبه معسكر تدريب صارم. الأوراق التي تنجو من أقسى التدريبات، وتجادل بالدليل، وتعيد كتابة عملها، هي الأوراق التي ستنتهي بتغيير العالم. المسار "السهل" غالبًا ما يؤدي إلى أعمال منسية.
باخت-القول: إذا كان المراجعون يقاتلون معك بقوة، فهذا يعني أن فكرتك تستحق هذا القتال.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.