Report on reproducibility in condensed matter physics

この報告書は、2024 年 5 月にピッツバーグ大学で開催された会議で学術界、政府研究所、ジャーナリスト、法曹、出版社、専門学会など多様な関係者が集まり議論した結果、凝縮系物理学における再現性と複製可能性を向上させるための推奨事項と科学プロセス全体におけるベストプラクティスを提示しています。

要約

🍳 料理のレシピ本が「再現できない」理由

想像してください。あなたが有名なシェフの料理本を買いました。
「世界一美味しいシチュー」のレシピが載っています。しかし、あなたがそのレシピ通りに作ってみても、全く同じ味になりません。

なぜでしょうか？

• 「塩を少し加えて」としか書かれていない（正確なグラム数がわからない）。
• 使った鍋のメーカーや、火加減の微妙なニュアンスが書かれていない。
• 「美味しいと感じた部分」の写真しか載っておらず、失敗した写真や、味付けを調整する前のデータは隠されている。

この論文は、物理学の世界でも**「同じ実験をしても、同じ結果が出ない（再現できない）」**という問題が深刻化していると指摘しています。

🔍 なぜこんなことが起きているの？（3 つの大きな問題）

この報告書では、問題の原因を 3 つの視点から説明しています。

1. 「すごい！」という話に目がくらんでいる（インセンティブの問題）

科学者たちは、**「新しい発見」「驚くべき結果」**を発表したいと願っています。

• 例え話: 料理コンテストで、「普通のシチュー」より「魔法のシチュー（実は嘘かもしれない）」の方が賞を取りやすいとします。
• 現実: 科学界でも、「すごい発見」をした方が、就職や資金獲得に有利です。そのため、研究者はついつい**「失敗したデータ」を隠したり、「都合の良いデータ」だけを選んで発表したり**してしまいます。これを「逆オッカムの剃刀（逆説的に、複雑で奇妙な話の方が好まれる現象）」と呼んでいます。

2. 「秘密のレシピ」を公開しない（データ共有の問題）

多くの研究者は、**「自分の実験データや計算コードを他人に教えると、先に真似されてしまう（スコープされる）」**と恐れています。

• 例え話: シェフが「このシチューの秘密のスパイスは 3 グラムだ」と言わず、「適量」とだけ書いて、他の人が同じ味を出せないようにしています。
• 現実: データや計算プログラム（コード）が公開されていないため、他の人が「本当に同じ結果が出るか」を確認できません。

3. 雑誌（ジャーナル）が「面白さ」を優先している

科学雑誌の編集者は、**「読者が驚くような記事」**を欲しがります。

• 例え話: 料理雑誌が「失敗したシチュー」や「再現性の確認実験」を載せることを嫌がり、「魔法のシチュー」だけを大々的に紹介します。
• 現実: 間違った結果や、再現できない結果を訂正する記事は、雑誌が載せてくれません。そのため、間違った情報が広がり続けてしまいます。

🛠️ 解決策：「透明なキッチン」を作るために

この論文では、物理学の未来を守るために、以下の**「新しいルール」**を提案しています。

👨‍🔬 研究者へのアドバイス

• レシピを全部書く: 実験に使ったすべてのデータ（失敗したものも含む）を公開する。
• 材料の明細: 使った機械の型番や、ソフトウェアのバージョンまで詳しく書く。
• 全員でチェック: 論文を書く前に、チーム全員がデータを確認し、誰でも再現できるようにする。

📰 科学雑誌へのアドバイス

• 「すごい話」より「正しい話」: 派手さよりも、データの正確さを重視して採択する。
• 再現実験を歓迎: 「あの結果は再現できませんでした」という論文も、立派な科学として掲載する。
• データ必須: データを公開しない論文は、載せないルールにする。

🏫 大学や資金提供者へのアドバイス

• 評価基準を変える: 「何回論文を出したか」ではなく、「その研究がどれだけ再現可能か」を評価する。
• 失敗を許す: 再現できない結果を出しても、それを報告した研究者を罰せず、むしろ評価する。
• 告発者の保護: 不正や問題に気づいた若手研究者が、恐れずに報告できる仕組みを作る。

🌟 まとめ：科学は「自分たちで直す」もの

この報告書が伝えたい一番のメッセージは、**「科学は完璧ではないが、自分たちで間違いを直し、より良くしていく力がある」**ということです。

今まで「科学は絶対正しい」と思われていましたが、実際には人間がやることなのでミスやバイアス（偏見）が入ります。でも、**「データを開示する」「失敗も共有する」「みんなでチェックする」**という新しい文化を作れば、物理学はより強くなり、未来の技術（スマホや医療など）も、より確実なものになります。

「料理の味を確かめるには、誰にでも同じレシピと材料が渡せる状態にするしかない」。
これが、この論文が提唱する「再現性のある科学」の核心です。

技術概要

論文タイトル: 凝縮系物理学における再現性と反復可能性に関する報告

日付: 2026 年 3 月 26 日（会議開催日：2024 年 5 月）
著者: A. Akrap, S. M. Frolov, J. P. Zwolak 他（学術界、政府機関、出版社、法曹、ジャーナリストなど多様な専門家による合同チーム）

---

**1. 問題の背景と定義 **(Problem)

1.1 凝縮系物理学（CMP）

• 現状: 凝縮系物理学は、LED、集積回路、MRI、GPS など、現代技術の基盤となる多くの画期的な発見を生み出してきた重要な分野である。しかし、社会科学や生物医学分野で指摘されている「再現性危機（Replication Crisis）」と同様の問題が CMP にも存在し、深刻化している。
• 定義の整理:
  • **再現性 **(Reproducibility) 既存の論文で提供された「同じ入力データ、計算手順、コード、分析条件」を用いて、同じ結果（図や数値）を再取得できること。
  • **反復可能性 **(Replicability) 異なる研究チームが「独自のデータ」を取得し、同じ科学的問いに対して「一貫した結果」を得ること。
• CMP 特有の課題:
  • データ不足: 多くの研究が少量のサンプル（1 つの試料や装置）に基づいており、統計的な検証が困難。
  • ブラックボックス化: 実験装置や解析コードが独自（Bespoke）であり、詳細なメタデータ（実験条件、パラメータ設定、データ選定基準）が共有されていない。
  • インセンティブの歪み: 「新奇性（Novelty）」や「驚異的な結果」が重視される出版文化が、データ選定バイアス（Cherry-picking）や過剰な解釈を助長している。
  • 検証の遅延: 誤った主張が訂正されるまでには数年を要し、その間に若手研究者のキャリアや資金が浪費される。

1.2 具体的な問題の顕在化

• 室温超伝導、Majorana フェルミオンの観測、LK-99 などの高インパクトな主張が、後に再現されなかったり撤回されたりする事例が増加。
• 多くの論文で、主要な結論を裏付ける「生データ（Raw Data）」や「解析スクリプト」が公開されていない。
• 「データは合理的な要請に応じて提供される」という曖昧なポリシーが、データ共有の障壁となっている。

---

**2. 調査・議論の手法 **(Methodology)

本報告は、2024 年 5 月にピッツバーグ大学で開催された「凝縮系物理学における再現性国際会議（International Conference on Reproducibility in Condensed Matter Physics）」の成果に基づいている。

• 参加者: 学術研究者（若手・ベテラン）、政府機関（NSF 等）、出版社編集者、科学ジャーナリスト、法曹、倫理専門家など。
• プロセス:
  • 高圧超伝導、非従来型超伝導、Majorana ゼロモード、密度汎関数理論（DFT）などの具体的なケーススタディに関する講演とパネルディスカッション。
  • 3 日間にわたる 7 時間のグループ討議（ワーキンググループ）。
  • 学術界、出版社、大学、資金提供機関、政府機関という 4 つの主要ステークホルダーに分かれた議論と合意形成。
• アプローチ: 既存の「国立科学・工学・医学アカデミー（NASEM）」の報告書や APS の倫理規定を参照しつつ、CMP の実情（探索的研究、高コストな実験、独自コードの多用など）に即した具体的な提言を策定。

---

**3. 主要な提言と貢献 **(Key Contributions & Recommendations)

報告書は、研究の全段階（実験、出版、評価、資金調達）における具体的なベストプラクティスと政策提言を 4 つのカテゴリーで提示している。

**A. 研究者へのベストプラクティス **(For Researchers)

1. パラメータ範囲の完全開示: 実験で検討した全パラメータ範囲を報告し、特定の範囲のみを選別して結論を導くバイアスを防ぐ。
2. 全著者のデータアクセス: 出版前に、すべての共著者が一次データと解析ファイルにアクセスし、分析を再確認できること。
3. 完全な情報開示: 論文、付録、補足資料に、再現に必要な十分な情報（装置のメーカー・モデル、ソフトウェアのバージョン、ライブラリ等）を含める。
4. データとコードの公開: 可能な限り一次データと解析スクリプトを公開。FAIR（検索可能、アクセス可能、相互運用可能、再利用可能）原則の達成を目指す。
5. 多様なデータ提示: 線形・対数スケール、色分けなど、異なる表現方法を含め、特定の解釈に偏らないようにする。
6. データ処理手順の明記: 生データから最終図版に至るまでの全処理ステップをスクリプトで公開。
7. 代替解釈の議論: 結果に対する複数の妥当な解釈（特に否定的な結果や異常値）を議論し、選択的解釈を避ける。
8. サンプル数の報告: 試験した試料数や装置数を明記し、2 番目・3 番目のデータセットの挙動についても言及する。
9. コード公開ポリシー: 内部開発コードについては、出版時または一定期間後の公開を明記する。
10. 訂正と撤回: 誤りを発見した場合は、迅速に訂正または撤回を行う。

**B. 科学出版社への提言 **(For Publishers)

1. 出版基準の転換: 主観的な「新奇性」や「インパクト」よりも、科学的妥当性（Validity）と正確性を優先。
2. データ・スクリプトの必須化: 「要請に応じて提供」ではなく、引用可能なリポジトリへの完全なデータ・スクリプト公開を条件とする。
3. 反復研究の受容: 反復研究（Replication studies）を受け入れるための明確な基準と、新しい記事タイプ（セクション）の創設。
4. 補足資料の審査: 補足資料（Supplemental Material）に対する具体的な審査基準の策定。
5. オープンレビューの導入: 査読者の氏名開示や、公開査読プロセスの検討。
6. 透明性のある撤回・訂正ポリシー: 撤回手続きの透明化と、迅速な対応。

**C. 大学・研究機関への提言 **(For Universities & Labs)

1. 研究成果の再定義: 論文だけでなく、データセットやコードも研究成果として評価する。
2. 昇進・評価基準の改変: 再現性・反復可能性への貢献を昇進審査で評価する。
3. 指標の脱却: 引用数などの出版指標（Publication Indices）への過度な依存を減らし、研究内容そのものを評価する（DORA 宣言の徹底）。
4. 不祥事調査の徹底: 内部調査の透明性を高め、外部専門家を含めた委員会による公正な調査を行う。
5. 不確実な科学の定義: 不正（Misconduct）以外の「信頼性の低い科学（Technical errors, Interpretive errors）」を定義し、是正を促す。
6. 告発者保護: 若手研究者を含む告発者（Whistleblowers）を保護する独立した窓口の設置。

**D. 政府・資金提供機関への提言 **(For Funding Agencies)

1. 反復研究の資金化: 既存の結果を反復・検証する研究に対して、直接的な資金提供を行う。
2. 計画段階での要件化: 資金申請書において、再現性・反復可能性の計画（データ管理計画など）を必須項目とする。
3. 評価と報酬: 再現性の高い研究や、否定的な結果（Negative results）を出した研究を評価・報酬する。
4. 報告義務の強化: 研究機関が資金提供機関に対して、科学的不正の疑義や調査結果を報告する義務を設ける。

---

**4. 期待される成果と結果 **(Expected Results & Outcomes)

• 短期的: 論文の投稿・審査プロセスにおけるデータ共有の標準化、補足資料の質の向上、撤回・訂正プロセスの透明性向上。
• 中期的: 研究文化の変化。若手研究者が「再現性の高い研究」を行うことがキャリアにプラスとなる環境の整備。
• 長期的:
  • 科学の信頼性回復と、誤った方向性への資金・人的資源の浪費の防止。
  • 公開データとコードを活用した、新たな学際的な発見（Synergy）の創出。
  • 凝縮系物理学分野全体における、サブ分野固有の「最低限の報告基準（Minimum Reporting Standards）」の確立。

---

**5. 意義と重要性 **(Significance)

• 分野の存続と発展: 凝縮系物理学は社会に不可欠な技術革新の源泉である。再現性危機を放置すれば、研究の質が低下し、社会からの信頼を失うリスクがある。本報告は、この危機を回避し、分野の健全性を維持するための指針となる。
• 学際的なモデルケース: 物理学は「自然法則は不変であるため再現性が高い」という神話に支えられてきたが、実際には複雑な実験系やデータ処理のブラックボックス化により脆弱であることを示した。この報告は、他の自然科学分野（化学、材料科学など）にとっても重要なモデルケースとなる。
• 政策への直接的な影響: 単なる提言にとどまらず、NSF（米国国立科学財団）や主要出版社（APS, Nature, Science など）が既に動き出している政策変更（データ共有義務化など）を後押しし、具体的な制度変更を促す役割を果たす。
• 文化的変革: 「新奇性」への過度な執着から、「正確性」と「透明性」への価値観の転換を促し、科学コミュニティ全体の倫理観を高める。

---

結論:
本報告書は、凝縮系物理学が直面する再現性の危機を認識し、研究者、出版社、大学、資金提供機関が連携して、データ共有、透明性の確保、評価基準の改革を推進するための包括的なロードマップを提供するものである。技術的な進歩だけでなく、科学の文化的・制度的な変革を通じて、将来の技術革新の基盤を強化することを目的としている。