Effects of Early Career Peer Review Service on Subsequent Grant Submission Outcomes&nbsp

本研究利用美国国立卫生研究院(NIH)的行政数据,采用倾向得分匹配方法,证明与未参与同行评审的同行相比,早期职业生涯参与同行评审服务与更高的资助申请量、更优的评审评分以及更高的资助成功率相关联。

原作者: Vancea, A., Pandit, K., Ornek, M., Bhattacharyya, D., Lindner, M., Reed, B.

发布于 2026-05-20
📖 1 分钟阅读☕ 轻松阅读

原作者: Vancea, A., Pandit, K., Ornek, M., Bhattacharyya, D., Lindner, M., Reed, B.

原始论文根据 CC0 1.0(https://creativecommons.org/publicdomain/zero/1.0/)发布到公有领域。 ⚕️ 这是一篇未经同行评审的预印本的AI生成解释。这不是医疗建议。请勿根据此内容做出健康决定。 阅读完整免责声明

以下是用通俗语言和创意类比对这篇论文的解读。

核心问题:“担任评委”会让你成为更优秀的“参赛者”吗?

想象一场规模宏大、 stakes 极高的烹饪比赛。为了赢得奖品(研究经费),你必须提交一份食谱(经费申请书)。但在你的食谱被评判之前,你必须排队等待,让一个由专家评委组成的评审团品尝并点评成百上千份其他食谱。

多年来,许多厨师(科学家)声称:“如果我能坐上评委席,我就能确切了解评委们在寻找什么。我会看到他们如何争论、给出什么分数,以及什么样的食谱才‘值得讨论’。这种经历会让我的食谱变得更好,我也将赢得更多奖品。”

然而,在这项研究之前,并没有确凿的证据。问题在于,被邀请担任评委的人通常已经是厨房里最出色的厨师。他们曾获奖、出版过食谱书,并享有盛誉。因此,如果他们后来赢得了比赛,是因为他们担任了评委,还是仅仅因为他们原本就才华横溢?

实验:一场“试吃”配对

为了解决这个问题,研究人员(来自资助这些“烹饪比赛”的巨型组织 NIH)利用一种称为倾向评分匹配(Propensity Score Matching)的方法,设计了一个巧妙的实验。

把这想象成科学家的“约会软件”。他们选取了两组人:

  1. 评委组:实际担任过审稿人的早期职业科学家(ECRs)。
  2. 非评委组:早期职业科学家,他们完全具备担任评委的资格(拥有相同数量的出版物、相同的职位头衔和相同的经验),但从未有机会担任审稿人。

研究人员使用计算机算法将他们完美配对,就像匹配双胞胎一样。来自“评委”组的一个“双胞胎”与来自“非评委”组的一个“双胞胎”配对。这确保了他们未来成功的任何差异都不能归咎于他们天生更有才华或拥有更好的资源。

接下来发生了什么?(结果)

研究人员在“评委”组完成服务后的三年内观察了这两组人。他们查看了这些科学家提交了多少新食谱、有多少获得了“二次审视”(被讨论)、分数有多高,以及有多少赢得了奖品(经费)。

以下是他们的发现:

  • 更多投稿:前评委们提交的食谱比他们配对的双胞胎更多
  • 更高分数:他们的食谱更有可能获得“高分”(意味着评委认为它们非常出色)。
  • 更多讨论:他们的食谱更有可能被选中进行热烈的群体讨论,这在比赛中是一件大事。
  • 更多获奖:最重要的是,前评委们赢得的经费奖品比非评委更多。

“秘密配方”(为什么会发生这种情况?)

论文提出了几个原因,解释为什么担任评委会有所帮助:

  1. 内部情报:就像一位观看了多年评委争论的参赛者一样,这些科学家学会了评审过程的“秘密语言”。他们学会了如何撰写申请书,以便击中要点并避免常见的陷阱。
  2. 信心:从内部了解运作过程可能会让他们在提交更多申请书时更加自信。
  3. 人脉网络:与其他专家同处一室可能会为合作和导师指导打开大门,尽管研究指出这很难直接衡量。

潜在问题(局限性)

作者谨慎地表示,这并不能证明每一位评委都会成为赢家。

  • “平均”分数:虽然评委们获胜的频率更高,但他们所有食谱的平均分数仅略有提高。有可能只有少数评委获得了巨大的提升,而其他人保持不变,但这少数几次大胜拉高了整个群体的水平。
  • 隐藏因素:可能还有其他未被测量的因素(例如他们在派对上建立人脉的能力)帮助他们获胜,而不仅仅是审稿服务本身。
  • 并非保证:担任评委并不能保证你获得资金。最终决定涉及许多其他因素,如组织的预算和优先事项。

结论

这项研究提供了第一个确凿证据,表明担任同行评审实际上有助于早期职业科学家在日后获得更多经费

这就像在说:“如果你能坐上评委的椅子,你就会如此透彻地掌握游戏规则,以至于当你作为参赛者上场时,你更有可能获胜。”研究人员得出结论,该项目是培养下一代科学家的绝佳方式,这不仅有助于组织运行会议,更有助于这些科学家在自己的职业生涯中取得成功。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →