peer-review-methodology

科学論文の査読

概要

査読は、科学論文や研究費申請書を評価するための体系的なプロセスです。このノウハウでは、初期評価から、各セクションの詳細な評価、統計的厳密性の確認、再現性の評価、図の整合性の検証、倫理的配慮、文章の質まで、査読サイクル全体を取り上げ、実行可能なフィードバックを含む構造化された査読報告書の作成に至ります。

主な概念

1. 査読の種類と期待される内容

査読の種類	範囲	一般的な長さ	主な着眼点
原著論文	全面的な評価	1～3ページ	厳密性、新規性、再現性
総説／メタ分析	網羅性とバイアス	1～2ページ	完全性、検索戦略、体系的な手法
方法論論文	妥当性の検証	1～2ページ	既存手法との比較、再現性
短報	内容に応じた評価	0.5～1ページ	簡潔であっても中心的な知見の厳密性
研究費申請書	実現可能性＋重要性	1～3ページ	革新性、研究アプローチ、チーム、予算の妥当性

2. コメントの深刻度

• 主要なコメント：妥当性、解釈可能性、または重要性に大きく影響する問題です。出版にあたって対応が必要です。例：根本的な研究デザインの欠陥、裏付けのない結論、対照群の不足。
• 軽微なコメント：明確さや完全性を高める問題ですが、根本的な妥当性には影響しません。例：不明瞭なラベル、方法の詳細の不足、文法上の誤り。
• 著者への質問：追加情報がなければ評価できない場合に、明確化を求める質問です。

3. 報告基準のクイックリファレンス

基準	対象	主な確認項目
CONSORT	ランダム化比較試験	フロー図、ランダム化、盲検化、ITT解析
STROBE	観察研究	研究デザイン、設定、参加者、変数、バイアス
PRISMA	システマティックレビュー／メタ分析	検索戦略、PICO、バイアスリスク、フォレストプロット
ARRIVE	動物実験	種、サンプルサイズ、ランダム化、3R
MIAME	マイクロアレイ実験	プラットフォーム、正規化、データ登録（GEO/ArrayExpress）
MINSEQE	シーケンシング実験	リード数、マッピング、QC指標、データ登録（SRA）

判定フレームワーク

What are you reviewing?
├── Scientific manuscript
│   ├── Original research → Full 7-stage workflow
│   ├── Review / meta-analysis → Emphasize Stage 2 (Introduction + Methods) + Stage 4
│   ├── Methods paper → Emphasize Stage 3 (rigor) + Stage 4 (reproducibility)
│   └── Short communication → Abbreviated workflow (Stages 1, 2, 3, 7)
├── Grant proposal
│   └── Focus on: significance, innovation, approach feasibility, team qualifications
└── Not a document review
    └── Use scientific-critical-thinking for evidence evaluation

査読者の状況	主な確認範囲	所要時間
ジャーナルの初回査読	7段階すべて、詳細な評価	4～8時間
改訂稿の再査読	前回の懸念事項に対応しているかのみ確認	1～2時間
研究室内のフィードバック	1～3、7段階（倫理、報告基準は省略）	2～4時間
学会抄録	第1段階のみ＋方法の簡単な確認	30分
研究費申請の審査	重要性＋革新性＋研究アプローチ＋チーム	3～6時間

ベストプラクティス

1. コメントを書く前に、原稿全体を一度通して読む：初読時に注釈を付けたい衝動を抑えましょう。最初に受けた印象は総評の作成に役立ち、重大な問題と軽微な問題を区別する助けになります。

2. 記述と評価を分ける：懸念事項ごとに、まず観察した事実を述べます（「著者らは、12件の比較に対する補正なしでp=0.04と報告しています」）。次に、なぜ問題なのかを述べ（「これは偽陽性率を高めます」）、最後に修正案を提案します（「ボンフェローニ補正またはFDR補正を適用し、有意性を再評価してください」）。

3. 参照しやすいよう、すべてのコメントに番号を付ける：著者が回答書でそれぞれに明確に対応できるよう、主要コメントと軽微なコメントの両方に通し番号を付けます。

4. 統計上の懸念について、確信度を示す：統計的な問題について確信がない場合は、そのことを明確に述べます（「ここで正規性の仮定が成り立つかどうか、確信がありません。著者らはシャピロ・ウィルク検定で確認するか、ノンパラメトリックな代替手法を使用してください」）。

5. 報告ガイドラインへの準拠を確認する：査読を書く前に、該当する報告ガイドライン（CONSORT、STROBE、PRISMAなど）を特定し、チェックリストを使って必要事項が網羅されているか確認します。チェックリスト項目の欠落は、主要コメントとして指摘する妥当な理由になります。

6. 長所を明確に認める：すべての査読に、具体的な長所を2～3点含めます。これは単なる礼儀ではありません。編集者に妥当な点を伝え、改訂時に何を変更しないべきかを著者が理解する助けになります。

7. 研究の範囲を超える実験を求めない：査読者は限界を指摘するべきであり、研究を再設計するべきではありません。「この限界は考察で認めるべきです」は適切です。「著者らは患者500人を対象とする新たなコホート研究を実施するべきです」は適切ではありません。

8. 図の品質について具体的に述べる：「図を改善する必要があります」ではなく、「図3A：y軸のラベルに単位がありません。エラーバーの定義が凡例にありません（SDとSEMのどちらでしょうか）。色分けは色覚多様性に配慮したものではありません」のように述べます。

9. 匿名性とプロ意識を保つ：シングルブラインドまたはダブルブラインド査読では、「私たちの以前の研究では……」といった自己言及的なコメントを避けます。見下したり、相手を軽んじたりする言葉は決して使いません。すべての批判を建設的な形で伝えます。

10. 根拠に見合った勧告をする：コメントがすべて軽微な問題であれば、却下を勧告しないでください。研究デザインに解消できない重大な懸念がある場合は、軽微な修正を勧告しないでください。勧告は、特定した問題の深刻度と一致していなければなりません。

よくある落とし穴

1. 論文の実際の内容ではなく、あるべき姿を評価する：著者のアプローチが妥当かどうかではなく、自分が好む実験手法に照らして論文を評価することです。回避方法：別の手法を自分なら使ったかどうかではなく、手法が明示された研究課題に答えているかどうかに注目します。

2. 統計的有意性と科学的重要性を混同する：p=0.001の論文でも取るに足らない場合があり、p=0.06の論文でも画期的な場合があります。回避方法：効果量と実用上の重要性を、p値とは分けて評価します。「有意か？」だけでなく、「重要か？」と問いかけます。

3. 修正要求の範囲が拡大する：現在の研究の検証ではなく、新たな研究に相当する追加実験を要求することです。回避方法：修正要求を書く前に、「これは論文の現在の結論を裏付けるために必要か？」と問いかけます。新たな問いを扱うものなら、代わりに今後の課題として提案します。

4. ポジティブコントロールを見落とす：ネガティブコントロールを確認する一方で、実験で主張された効果を実際に検出できることが示されているかを無視することです。回避方法：各実験について、「効果が存在しない場合はどうなるか？」（ネガティブコントロール）と「アッセイが実際に機能することを何が示すか？」（ポジティブコントロール）の両方を確認します。

5. コピー＆ペーストによる査読：個々の原稿の内容を踏まえずに、異なる原稿に同じ定型的な懸念事項を使うことです。回避方法：すべてのコメントで、この原稿内の特定の節、図、または主張に言及します。一般的な助言（「文章の質を改善する」など）は役に立ちません。

6. 補足資料を無視する：重要な手法の詳細や検証データの多くは補足資料に記載されています。回避方法：必ず補足資料を読み、特に方法と本文から参照されている図を確認します。

7. 非対称な懐疑的態度：自分の予想に反する知見にはより批判的である一方、予想を裏付ける知見は無批判に受け入れることです。回避方法：結論に賛成かどうかにかかわらず、すべての結果に同じ方法論的精査を適用します。

ワークフロー

7段階の査読プロセス

1. 初期評価（注釈を付けずに原稿全体を読む）：中心的な問い、主な知見、全体的な妥当性、投稿先としての適切性を特定します。原稿の要点を捉えた2～3文の要約を書きます

2. 節ごとの査読：各節（Abstract、Introduction、Methods、Results、Discussion、References）を、具体的な基準に照らして評価します：

   • Abstract：正確性、網羅性、明瞭さ
   • Introduction：背景、根拠、新規性、文献の網羅性
   • Methods：再現可能性、厳密さ、詳細さ、統計的根拠
   • Results：提示の論理性、網羅性、客観性
   • Discussion：解釈の裏付け、限界、文脈、推測

3. 統計的・方法論的な厳密さ：統計的仮定、効果量、多重検定補正、サンプルサイズの妥当性、適切な検定の選択、対照の妥当性、ランダム化、盲検化を確認します

4. 再現可能性と透明性：データの公開状況（リポジトリ、アクセッション番号）、コードの公開状況、報告基準への準拠（CONSORT/STROBE/PRISMA/ARRIVE）、プロトコルの詳細を確認します

5. 図とデータの完全性：解像度、ラベル、エラーバーの定義、色のアクセシビリティ、画像操作の兆候、スケールバー、データ型の適切性を確認します

6. 倫理的配慮：IRB/IACUCの承認、インフォームド・コンセント、3Rsへの準拠、利益相反の開示、資金提供の開示、データのプライバシーを確認します

7. 文章の質：構成、言葉の明瞭さ、専門用語の使用、論旨の流れ、幅広い読者にとっての読みやすさを評価します

査読レポートの構成

すべてのステージを完了したら、フィードバックを次のようにまとめます。

• 要約（1～2段落）：概要、全体的な推奨、長所2～3点、短所2～3点
• 主要コメント（番号付き）：妥当性や解釈可能性に関する重大な問題と、具体的な提案
• 軽微なコメント（番号付き）：明確さや完全性を高めるための改善点と該当箇所
• 著者への質問：具体的な確認事項
• 推奨判定：採択／軽微な修正／大幅な修正／不採択（コメントと一貫した判定）

参考資料

• COPE Ethical Guidelines for Peer Reviewers — 出版倫理委員会
• EQUATOR Network — すべての研究タイプを対象とした報告ガイドライン
• Stahel & Moore（2014）「Peer review for biomedical publications: we can improve the system」— BMC Medicine 12:179
• Lovejoy et al.（2011）「An introduction to systematic reviewing」— BMJ Open
• 査読の方法 — Wiley の査読者向けガイド

関連スキル

• scientific-critical-thinking — エビデンスの質と論理的推論の評価（原稿の査読より広い範囲を扱います）
• scientific-writing — 原稿の執筆。著者の視点を理解することで、より良い査読を書けます
• literature-review — エビデンスを体系的に収集します。ステージ4（再現性）の評価を補完します
• scholar-evaluation — 原稿の自動評価に用いる定量的なスコアリングフレームワーク