प्रिंट-पूर्व समीक्षा को अपनाया क्यों नहीं जा रहा है?
पीयर रिव्यू की सीमाएँ और उद्देश्य
- बहुत से लोग पीयर रिव्यू को एक कमजोर लेकिन उपयोगी “स्पैम फ़िल्टर” मानते हैं, जो साफ़-ज़ाहिर बकवास को छाँटता है, न कि सत्य या पुनरुत्पादनीयता की गारंटी देता है।
- कई लोगों का तर्क है कि गैर-विशेषज्ञ “peer reviewed” लेबल पर ज़्यादा भरोसा कर लेते हैं; किसी क्षेत्र के भीतर, समीक्षा हुई हो या नहीं, शोध-पत्रों को संदेह के साथ ही पढ़ा जाता है।
- अन्य लोग कहते हैं कि खामियों के बावजूद, पीयर रिव्यू और जर्नल क्यूरेशन सिग्नल-टू-नॉइज़ अनुपात को काफ़ी बेहतर बनाते हैं और पाठकों को उच्च-मूल्य वाले काम की ओर मार्गदर्शित करते हैं।
पुनरुत्पादनीयता और प्रतिकृति
- अप्रतिरूपणीयता अक्सर प्रकाशन के समय पकड़ी नहीं जा सकती; कुछ लोगों के अनुसार गैर-प्रतिलिप्यन विज्ञान का एक अपेक्षित हिस्सा है।
- अन्य कहते हैं कि समीक्षक power analysis जैसे उपकरणों और डिज़ाइन की गहन जाँच (जैसे preregistration, controls) से संभावित रूप से गैर-प्रतिलिप्यनशील काम की पहचान कर सकते हैं।
- प्रमुख व्यावहारिक बाधाएँ: प्रतिकृति के लिए प्रोत्साहन का अभाव, उच्च लागत (खासकर ML और बड़े प्रयोगों में), और छिपे हुए डेटा/विधियाँ।
- सुझावों में खुला डेटा/कोड अनिवार्य करना, नकारात्मक परिणामों और प्रतिकृति प्रयासों के लिए मंच बनाना, और यहाँ तक कि citation rights या प्रकाशन को स्वतंत्र प्रतिकृति से जोड़ना शामिल है—हालाँकि आलोचक इसे अव्यावहारिक और कम-जोखिम वाले काम के पक्ष में झुका हुआ बताते हैं।
प्रिंट-पूर्व (Preprints), प्रिंट-पूर्व समीक्षा, और जर्नल
- कुछ क्षेत्रों में (विशेषकर CS/ML), arXiv-शैली के preprints व्यवहारतः प्राथमिक संचार हैं; conferences/journals केवल एक “stamp” जोड़ते हैं, मूल प्रसार का काम नहीं करते।
- OpenReview, eLife के reviewed-preprints, TMLR, PREreview, और git-आधारित “journals” जैसे खुले प्लेटफ़ॉर्म उभरते मॉडलों के रूप में चर्चा में हैं।
- एक धड़ा pre-publication peer review को न्यूनतम या समाप्त करना चाहता है, और editor-only जाँच के साथ-साथ publication के बाद खुले आलोचनात्मक review की ओर लौटना चाहता है।
- दूसरे लोग ज़ोर देते हैं कि journals अब भी ज़रूरी curation और प्रतिष्ठा संकेत देते हैं; इनके बिना मूल्यवान काम शोर में दब जाने का जोखिम रहता है।
प्रोत्साहन, प्रतिष्ठा, और कार्यभार
- Publish-or-perish और prestige metrics (venue, impact) को सलामी-स्लाइस्ड papers, डिज़ाइन-ख़राब studies, और प्रतिकृति करने की अनिच्छा के मूल कारणों के रूप में देखा जाता है।
- Review बिना वेतन वाला, समय लेने वाला विशेषज्ञ श्रम है; कुछ लोग reviewer/replicator लागत को grants में शामिल करने और विस्तृत काम के लिए भुगतान करने का सुझाव देते हैं।
- संदेहवादी चेतावनी देते हैं कि भुगतान low-effort rubber-stamping, reviewer ratings के साथ gaming, और authors को “consulting-style” खुश करने की प्रवृत्ति को बढ़ावा दे सकता है।
अन्य चिंताएँ और विचार
- आशंकाओं में preprint review का एक और culture-war battleground या “science by consensus” बन जाना शामिल है।
- प्रस्ताव arXiv comment systems और papers पर “Twitter-style community notes” से लेकर, citing करते समय अनिवार्य mini-reviews, और AI research में AI-assisted code/experiment QA तक फैले हुए हैं।
- कई लोग नोट करते हैं कि सार्वजनिक अविश्वास का स्रोत peer review से कम और sensationalist journalism तथा institutional incentives से अधिक है।