peer-review-methodology

科学同行评审

概述

同行评审是评估科学论文和基金申请的一套系统流程。本指南涵盖完整的评审周期：从初步评估到逐节详细审查、统计严谨性核查、可重复性评估、图表完整性验证、伦理考量和写作质量评估，最终形成一份包含可执行反馈的结构化评审报告。

核心概念

1. 评审类型与要求

评审类型	范围	典型篇幅	重点关注
原创研究	全面评估	1–3 页	严谨性、新颖性、可重复性
综述／荟萃分析	覆盖范围与偏倚	1–2 页	完整性、检索策略、系统性方法
方法学论文	验证	1–2 页	与现有方法的比较、可重复性
短篇通讯	按篇幅相称	0.5–1 页	尽管篇幅简短，仍须关注核心发现的严谨性
基金申请	可行性 + 重要性	1–3 页	创新性、研究方案、团队、预算依据

2. 评论严重程度

• 重大意见：显著影响有效性、可解释性或重要性的问题。发表前必须解决。例如：根本性的设计缺陷、缺乏依据的结论、缺少对照。
• 次要意见：有助于提升清晰度或完整性，但不影响核心有效性的问题。例如：标签不清晰、方法细节缺失、语法错误。
• 向作者提出的问题：在缺少补充信息时，评审者无法进行评估，因此请求澄清。

3. 报告规范速查

规范	适用对象	重点检查项
CONSORT	随机对照试验	流程图、随机化、盲法、意向性治疗分析
STROBE	观察性研究	研究设计、研究环境、参与者、变量、偏倚
PRISMA	系统综述／荟萃分析	检索策略、PICO、偏倚风险、森林图
ARRIVE	动物研究	物种、样本量、随机化、3R 原则
MIAME	微阵列实验	平台、标准化、数据存储库（GEO/ArrayExpress）
MINSEQE	测序实验	读数、比对、质量控制指标、数据存储库（SRA）

决策框架

What are you reviewing?
├── Scientific manuscript
│   ├── Original research → Full 7-stage workflow
│   ├── Review / meta-analysis → Emphasize Stage 2 (Introduction + Methods) + Stage 4
│   ├── Methods paper → Emphasize Stage 3 (rigor) + Stage 4 (reproducibility)
│   └── Short communication → Abbreviated workflow (Stages 1, 2, 3, 7)
├── Grant proposal
│   └── Focus on: significance, innovation, approach feasibility, team qualifications
└── Not a document review
    └── Use scientific-critical-thinking for evidence evaluation

评审情境	重点领域	时间预算
期刊首轮评审	全部 7 个阶段，全面审查	4–8 小时
修订稿复审	仅检查此前提出的问题是否已解决	1–2 小时
实验室内部反馈	阶段 1–3、7（跳过伦理和报告规范）	2–4 小时
会议摘要	仅阶段 1 + 简要检查方法	30 分钟
基金评审	重要性 + 创新性 + 研究方案 + 团队	3–6 小时

最佳实践

1. 撰写任何评论前，先完整阅读一遍稿件：克制住首次阅读时就做批注的冲动。初步印象有助于撰写总结陈述，也能帮助区分重大问题和次要问题。

2. 将描述与判断分开：对于每个问题，先陈述观察到的情况（“作者报告了 p=0.04，但未对 12 次比较进行校正”），再说明问题所在（“这会提高假阳性率”），最后提出解决办法（“采用 Bonferroni 校正或 FDR 校正，并重新评估显著性”）。

3. 为每条评论编号，方便引用：主要评论和次要评论都应依次编号，以便作者在回复信中逐条作出回应。

4. 说明对统计问题的把握程度：如果不确定某个统计问题，应明确说明（“我不确定这里是否满足正态性假设——作者应使用 Shapiro-Wilk 检验进行验证，或采用非参数替代方法”）。

5. 检查是否符合报告规范：撰写评审意见前，先确认适用哪项报告规范（CONSORT、STROBE、PRISMA 等），并使用相应清单核查完整性。清单中缺失的项目可以作为主要评论提出。

6. 明确指出优点：每份评审意见都应包含 2–3 项具体优点。这并非出于礼貌，而是为了告知编辑哪些方面是可靠的，也帮助作者了解修订时哪些内容不应更改。

7. 切勿要求开展超出研究范围的实验：评审人应指出局限性，而不是重新设计研究。“应在讨论部分说明这一局限性”是恰当的；“作者应招募 500 名患者开展新的队列研究”则不恰当。

8. 具体指出图表质量问题：不要只说“图表需要改进”，而应具体说明：“图 3A：y 轴标签缺少单位；图例未定义误差线（SD 还是 SEM？）；配色不适合色盲读者。”

9. 保持匿名和专业：在单盲或双盲评审中，避免使用自我指涉的评论（“在我们之前的工作中……”）。切勿使用轻蔑或居高临下的语言。所有批评都应以建设性的方式表达。

10. 让建议与证据相符：如果评论都是次要问题，就不要建议拒稿。如果存在无法解决的重大研究设计问题，就不要建议小修。建议必须与所发现问题的严重程度一致。

常见误区

1. 评判论文应该是什么样，而不是它实际是什么样：按照你偏好的实验方法来评判论文，而不是评估作者采用的方法是否有效。避免方法：关注这些方法能否回答论文提出的研究问题，而不是你是否会采用其他方法。

2. 混淆统计显著性与科学重要性：p=0.001 的论文可能微不足道；p=0.06 的论文也可能具有开创性。避免方法：将效应量和实际意义与 p 值分开评估。问问“这有意义吗？”，而不只是“这是否显著？”

3. 修订要求范围蔓延：要求补充实验，导致工作变成一项新研究，而不是对当前研究进行验证。避免方法：提出修订要求前，先问“这对于支持论文当前的结论是必要的吗？”如果它针对的是一个新问题，就将其作为未来工作建议。

4. 忽视阳性对照：检查阴性对照，却忽略实验是否能证明它确实可以检测到所声称的效应。避免方法：对每项实验，都要检查“如果这种效应不存在，会发生什么？”（阴性对照）以及“什么能证明检测方法确实有效？”（阳性对照）。

5. 复制粘贴式审稿：对不同的稿件使用相同的套话式意见，却没有深入审阅具体内容。避免方法：每条意见都应提及本稿件中的具体章节、图表或论点。泛泛的建议（如“提升写作质量”）没有帮助。

6. 忽视补充材料：许多关键的方法细节和验证数据都在补充材料中。避免方法：务必阅读补充材料，尤其是方法部分以及正文中引用的图表。

7. 不对称的审慎态度：对与自己预期相悖的发现更加挑剔，却不加批判地接受证实预期的发现。避免方法：无论你是否认同结论，都应以同等的方法学标准审视所有结果。

工作流

同行评审的 7 个阶段

1. 初步评估（通读全文，不做批注）：确定核心问题、主要发现、整体可靠性以及是否适合投稿至该刊物。用 2-3 句话概述稿件的核心内容

2. 逐节审阅：依据具体标准评估各个部分（摘要、引言、方法、结果、讨论、参考文献）：

   • 摘要：准确性、完整性、清晰度
   • 引言：背景、研究依据、新颖性、文献覆盖情况
   • 方法：可复现性、严谨性、详细程度、统计学依据
   • 结果：呈现逻辑、完整性、客观性
   • 讨论：解释是否有依据、局限性、背景、推测

3. 统计和方法学严谨性：检查统计假设、效应量、多重检验校正、样本量依据、检验方法选择是否恰当、对照是否充分、随机化、盲法

4. 可复现性与透明度：核实数据可用性（存储库、登录号）、代码可用性、报告规范合规情况（CONSORT/STROBE/PRISMA/ARRIVE）、方案细节

5. 图表与数据完整性：检查分辨率、标签、误差线定义、色彩可访问性、图像篡改迹象、比例尺、数据类型是否恰当

6. 伦理考量：核实 IRB/IACUC 批准、知情同意、3R 原则合规情况、利益冲突披露、资金来源披露、数据隐私

7. 写作质量：评估结构、语言清晰度、术语使用、叙述流畅度、对广大读者的可读性

审稿报告结构

完成所有阶段后，请按以下结构整理反馈：

• 总结陈述（1-2 段）：概述、总体建议、2-3 项优点、2-3 项缺点
• 主要意见（编号）：影响有效性或可解释性的关键问题，并提出具体建议
• 次要意见（编号）：说明需改进清晰度或完整性的内容及其所在位置
• 给作者的问题：需要作者具体澄清的问题
• 建议：接受 / 小修 / 大修 / 拒稿（应与审稿意见一致）

延伸阅读

• COPE 同行评审者伦理准则 — 出版伦理委员会
• EQUATOR Network — 适用于所有研究类型的报告指南
• Stahel & Moore（2014）“生物医学出版物的同行评审：我们可以改进这一体系”——BMC Medicine 12:179
• Lovejoy 等（2011）“系统综述导论”——BMJ Open
• 如何进行同行评审 — Wiley 审稿者指南

相关技能

• scientific-critical-thinking — 评估证据质量和逻辑推理（范围比稿件评审更广）
• scientific-writing — 稿件撰写；了解作者视角有助于撰写更好的审稿意见
• literature-review — 系统收集证据；有助于完成第 4 阶段（可复现性）评估
• scholar-evaluation — 用于自动化稿件评估的量化评分框架