Peer Review Trajectories of Disruptive Research: Evidence from Reviewer Comments, Review Rounds and Author Responses
通过对 PLOS ONE 同行评审历史的分析,本研究揭示了颠覆性研究由于作者响应时间的原因,其接受轨迹略长,且面临更高比例关于清晰度、实质内容和原创性的负面评论,这表明在出版前存在一种评估可读性方面的选择性挑战。
原始论文采用 CC BY 4.0 许可(https://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
科学往往感觉像是事后才发生的对话。当一个新想法改变了一个领域的研究方向时,我们通常要在多年后,通过观察其他科学家如何引用这项工作,才能察觉到它的存在。这些“颠覆性”的论文不仅仅是增加了我们已有的知识,它们还改变了未来研究的路径,使旧的思想显得不再那么重要。但在这些论文达到被认可的程度之前,它们必须通过一道门槛:同行评审。在这个过程中,专家们阅读手稿、进行批判,并决定它是否准备好发表。几十年来,我们一直知道突破性的想法可能难以识别,但对于当一篇颠г覆性论文落在评审员桌上时,评审室内部究竟发生了什么,我们却几乎没有任何证据。它是更容易被拒绝吗?评论家们是否难以理解它?还是说这个过程与任何其他研究并无二致?
南京理工大学的一个研究小组决定窥探这个“黑箱”。他们转向了一个独特的资源:期刊《PLOS ONE》的公开评审历史。与许多将作者与评审员之间的往复过程保持私密的期刊不同,《PLOS ONE》公布了完整的记录,包括最初的评论、作者的回应以及每一个步骤的时间线。研究人员收集了近 19,000 篇此类已接收的文章,并根据这些论文随后被引用的情况,建立了一个衡量“颠覆性”的标准。随后,他们使用先进的语言软件阅读了数十万条评论,并根据评审员所担忧的问题对评论进行分类——例如写作是否清晰、方法是否可靠,或者想法是否真正具有原创性。他们还观察了作者如何回应这些担忧,检查他们是修改了论文、提供了解释,还是进行了辩论。
从这个庞大数据集中浮现出的故事非常具体。研究人员发现,那些后来会变得具有颠覆性的论文确实需要更长的时间才能发表,但这并不是因为编辑或评审员动作变慢了。额外的时间完全来自于作者本身。当一篇颠覆性论文处于评审阶段时,作者在撰写回复和进行修改上花费了更多时间。这表明,延迟并非由于评审者的拒绝或困惑,而是一个作者必须更加努力地让其深奥的想法契合进标准科学论文格式的过程。
当研究人员观察评审员实际说了什么时,他们发现颠覆性论文并没有受到更多的批评。评论的总数与任何其他论文大致相同。然而,批评的“类型”却有所不同。评审员更有可能抱怨写作的清晰度、内容的深度以及想法的原创性。他们不太可能质疑研究是否可以重复,或者数据在技术上是否正确。这指向了一种特定的挣扎:评审员并不是在说科学是错误的,而是说它难以理解,或者难以将其置于现有的知识版图中。这项工作的颠盖性使其在标准的科学评估方式面前显得“难以解读”,迫使作者花费更多时间来阐明他们的信息。
随着评审过程进入多个轮次,这些担忧表现出了有趣的特性。关于研究是否可以重复的担忧往往消失得很快,这表明一旦数据经过核实,问题就得到了解决。然而,关于清晰度和研究深度的担忧持续时间稍长,出现在更多的评审轮次中,之后才最终消退。这表明,使一个颠覆性的想法变得清晰且充实是一个持久的挑战,需要多次修改才能到位。
或许最令人启发的发现在于作者是如何“反击”的。面对批评时,颠覆性论文的作者并不经常进行争辩。他们并不试图通过言语来化解问题。相反,他们更有可能只是修改论文。他们采纳评审员的笔记并对文本进行具体的改动,而不是仅仅解释为什么原始版本是没问题的。这种模式表明,发表颠覆性想法的路径不在于赢得与评审员的辩论,而在于耐心地重塑手稿,直到这个新颖的想法变得清晰且可被接受。
最终,这项研究表明,颠覆性论文的旅程是由对“清晰度”的追求而非对“事实”的争夺所定义的。发表这些论文所需的额外时间和精力,源于需要将一个激进的新想法转化为评审员能够立即理解的语言。这一过程充当了一个过滤器,它过滤的不是正确性,而是“可读性”。当这些论文被接收时,它们已经被重新构架并稳定下来,从而为最终改变该领域做好了准备。这项研究证实,虽然颠覆性的科学在多年后才因其影响力被认可,但这些影响力的种子早在论文发表之前,就已经播种在那些默默且往往艰辛的修改工作中了。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。