Rigor and Transparency in two neurotrauma-publishing journals: editorial policies improve transparent reporting.
यह अध्ययन दर्शाता है कि *Journal of Neurotrauma* के अनिवार्य कठोरता अनुभाग ने *Experimental Neurology* की तुलना में विशिष्ट पारदर्शिता मदों की रिपोर्टिंग में महत्वपूर्ण सुधार किया, हालांकि इसने जैविक चर के रूप में लिंग और अभिकर्मक विवरणों की रिपोर्टिंग में और सुधार की आवश्यकता को रेखांकित किया।
मूल पेपर CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। यह एक ऐसे प्रीप्रिंट की AI से तैयार की गई व्याख्या है जिसकी अभी सहकर्मी समीक्षा नहीं हुई है। यह चिकित्सकीय सलाह नहीं है। इस सामग्री के आधार पर स्वास्थ्य संबंधी फैसले न लें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि चिकित्सा अनुसंधान की दुनिया एक विशाल निर्माण स्थल (construction site) की तरह है। वैज्ञानिक उन वास्तुकारों और बिल्डरों की तरह हैं जो ट्रॉमैटिक ब्रेन इंजरी (TBI) के लिए इलाज डिजाइन करने की कोशिश कर रहे हैं, जो एक ऐसी स्थिति है जिससे लाखों लोग प्रभावित होते हैं। दशकों से, उन्होंने कई ब्लूप्रिंट (लैब अध्ययन) बनाए हैं जो कागज पर तो एकदम सही दिखते थे। लेकिन जब उन्होंने वास्तव में गगनचुंबी इमारतें (मानव नैदानिक परीक्षण) बनाने की कोशिश की, तो इमारतें ढहती गईं।
क्यों? क्योंकि ब्लूप्रिंट में महत्वपूर्ण विवरण गायब थे। उनमें यह नहीं लिखा था कि माप की निगरानी कौन कर रहा था, कितने ईंटों की आवश्यकता थी, या किस प्रकार के सीमेंट का उपयोग किया गया था। यही rigor and transparency (सटीकता और पारदर्शिता) की समस्या है।
यह शोध पत्र दो अलग-अलग निर्माण फर्मों (जर्नल्स) को दिए गए एक रिपोर्ट कार्ड की तरह है, यह देखने के लिए कि कौन सी फर्म अपने बिल्डरों को बेहतर ब्लूप्रिंट लिखना सिखा रही है।
दो निर्माण फर्में (जर्नल्स)
शोधकर्ताओं ने TBI अध्ययनों को प्रकाशित करने वाले दो प्रमुख जर्नल्स की तुलना की:
- Journal of Neurotrauma (JNeuroT): इस जर्नल ने हाल ही में नियमों को बदलने का निर्णय लिया है। 2022 से, उन्होंने लेखकों से कहा: "अपना पेपर छापने से पहले आपको एक विशेष 'Rigor Checklist' भरना होगा। आपको स्पष्ट रूप से बताना होगा कि आपने अपने अध्ययन को कैसे ब्लाइंड (blind) किया, अपने सैंपल साइज की गणना कैसे की, और अपना डेटा कैसे साझा किया।"
- Experimental Neurology (ExpNeuro): यह जर्नल आकार और प्रतिष्ठा में समान है, लेकिन इसने अपने नियम नहीं बदले। वे अभी भी केवल एक मानक पेपर मांगते हैं बिना किसी अनिवार्य चेकलिस्ट के।
जासूसी उपकरण (SciScore)
इन पेपर्स को ग्रेड देने के लिए, लेखकों ने हर एक शब्द को मैन्युअल रूप से नहीं पढ़ा (ऐसा करने में बहुत समय लगता!)। इसके बजाय, उन्होंने SciScore नामक एक AI जासूस का उपयोग किया।
SciScore को एक सुपर-फास्ट रोबोट इंस्पेक्टर के रूप में समझें जो सेकंडों में हजारों ब्लूप्रिंट को स्कैन करता है। यह विशिष्ट "सुरक्षा टैग" (जैसे "blinding," "power calculation," या "data availability") की तलाश करता है। यदि ब्लूप्रिंट में वह टैग है, तो उसे एक अंक मिलता है। यदि वह गायब है, तो उसे शून्य मिलता है। रोबोट फिर पेपर को 1 से 10 तक स्कोर देता है।
उन्हें क्या मिला?
परिणाम "बहुत बढ़िया काम!" और "अभी तक लक्ष्य तक नहीं पहुँचा" का मिश्रण थे।
1. चेकलिस्ट काम करती है (उसके लिए जो वह पूछती है)
जब Journal of Neurotrauma के लेखकों को विशेष चेकलिस्ट भरने के लिए मजबूर किया गया, तो उन्होंने वास्तव में इसे किया!
- उपमा: कल्पना कीजिए कि एक शिक्षक कहता है, "आपको अपने होमवर्क के बारे में एक पैराग्राफ लिखना है।" अचानक, कक्षा के 50% छात्र वह पैराग्राफ लिखते हैं। पहले, केवल 10% ही ऐसा करते थे।
- परिणाम: नए चेकलिस्ट वाले पेपर ब्लइंडिंग (कि असली उपचार किसे मिला यह छिपाना), पावर कैलकुलेशन (यह सुनिश्चित करना कि अध्ययन पर्याप्त बड़ा था), और डेटा शेयरिंग जैसी चीजों को रिपोर्ट करने में बहुत बेहतर थे। वे दूसरे जर्नल की तुलना में काफी अधिक स्कोर करते हैं।
2. "ब्लाइंड स्पॉट" (जो चेकलिस्ट ने मिस कर दिया)
यहाँ एक पेंच है: चेकलिस्ट बहुत विशिष्ट थी। इसने A, B और C के बारे में पूछा। लेकिन इसने स्पष्ट रूप से D, E और F के बारे में नहीं पूछा।
- उपमा: कल्पना कीजिए कि शिक्षक कहता है, "अपने होमवर्क के बारे में लिखो।" छात्र गणित और विज्ञान के बारे में लिखते हैं। लेकिन वे इतिहास का उल्लेख करना भूल जाते हैं, भले ही इतिहास भी उतना ही महत्वपूर्ण हो।
- परिणाम: क्योंकि चेकलिस्ट ने Sex as a Biological Variable (यह रिपोर्ट करना कि परीक्षण विषय पुरुष थे या महिला) या Transparent Antibody Reporting (ठीक से नाम बताना कि किन रासायनिक उपकरणों का उपयोग किया गया) के बारे में स्पष्ट रूप से नहीं पूछा, इसलिए लेखकों ने उन्हें रिपोर्ट नहीं किया। वास्तव में, चेकलिस्ट वाले पेपर कभी-कभी दूसरे जर्नल के पेपर्स की तुलना में इन गायब मदों को रिपोर्ट करने में बदतर थे, जिसने बिना किसी चेकलिस्ट के काम किया था!
3. "सुरक्षा की झूठी भावना"
लेखक सुझाव देते हैं कि जब वैज्ञानिक एक चेकलिस्ट देखते हैं, तो वे सोच सकते हैं, "ओह, मैंने फॉर्म भर दिया है, इसलिए मेरा अध्ययन सटीक है!" वे अन्य महत्वपूर्ण विवरणों पर ध्यान देना छोड़ सकते हैं जो सूची में नहीं थे। यह एक ड्राइवर की तरह है जो सीटबेल्ट तो लगा लेता है लेकिन फिर सुरक्षित महसूस करने के कारण 100 मील प्रति घंटे की रफ्तार से गाड़ी चलाता है।
मुख्य निष्कर्ष
अध्ययन यह निष्कर्ष निकालता है कि लेखकों को एक विशिष्ट अनुभाग भरने के लिए मजबूर करना काम करता है, लेकिन केवल उन विशिष्ट चीजों के लिए जो उस अनुभाग में सूचीबद्ध हैं।
- अच्छी खबर: Journal of Neurotrauma इन अनुभागों की आवश्यकता रखकर राह दिखा रहा है, और यह उन मदों की रिपोर्टिंग में सुधार कर रहा है जिनके बारे में उसने पूछा है।
- बुरी खबर: यह कोई जादू की छड़ी नहीं है। यदि चेकलिस्ट में "Sex" या "Reagent IDs" के बारे में नहीं पूछा गया है, तो लेखक उन्हें छोड़ देते हैं।
अंतिम सबक:
प्रयोगशाला प्रयोगों और वास्तविक उपचारों के बीच टूटे हुए पुल को ठीक करने के लिए, जर्नल्स केवल एक चेकलिस्ट जोड़कर और उसे समाप्त नहीं मान सकते। उन्हें यह सुनिश्चित करने की आवश्यकता है कि चेकलिस्ट में सब कुछ शामिल हो जो मायने रखता है (जैसे लिंग अंतर और सटीक रिएजेंट नाम), न कि केवल वे चीजें जिन्हें देखना आसान है। अन्यथा, हम केवल एक शानदार सामने वाला दरवाजा बनाकर घर बना रहे हैं, जबकि उसकी नींव अभी भी कमजोर है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।