TrueEBSD in MTEX: automatic image matching for correlative microscopy applications

本論文は、EBSD マップを他のイメージングデータと統合して高度な定量的結晶構造測定を可能にする相関顕微鏡分析を促進するために、自動画像整列および空間歪み補正を可能にする MTEX 用のオープンソース MATLAB アドオンである TrueEBSD を紹介する。

要約

巨大なジグソーパズルを解こうとしていると想像してください。しかし、手元にあるピースは2つの異なる箱から来たものです。一方の箱にはパズルの「骨格」の地図（ピースの形状と向きを示すもの）が入っており、もう一方の箱にはパズルの「表面」の写真（色や質感を示すもの）が入っています。

問題は、これら2つの画像がわずかに異なる時刻と角度で撮影されたことです。そのため、「骨格」の地図は「表面」の写真と比較して、引き伸ばされ、傾き、あるいはずれています。これらを重ねて置こうとすると、端が合わず、画像はぼやけて不正確に見えます。2つの視点が一貫していないため、パズルの真実の姿を理解することはできません。

これは、金属合金や銅などの材料を研究する科学者が直面する問題と全く同じです。彼らは2つの強力なツールを使用します：

1. EBSD：材料の内部にある「結晶骨格」（原子の配列）をマッピングする顕微鏡技術。
2. SEM 画像：表面の質感、亀裂、または異なる材料相（白黒写真とカラー写真のようなもの）を示す標準的な顕微鏡写真。

通常、顕微鏡内の微小なズレ、傾き、またはドリフトにより、これら2つの画像は完全に一致しません。

解決策：TrueEBSD

この論文は、TrueEBSDと呼ばれる新しいソフトウェアツールを紹介しています（現在は MTEX という人気のあるツールボックスに組み込まれています）。TrueEBSD は、これらの不一致な画像を繋ぎ合わせ、整列させるための「賢く自動的な接着剤と整列装置」と考えてください。

人間が手動で点を指定して画像を合わせる（これは遅く、人的ミスが発生しやすい）のではなく、TrueEBSD は自動的に作業を行います。粒の端や特定のパターンなど、両方の画像に共通する特徴を探し出し、一方の画像を他方に合わせるために、どれほど引き伸ばし、移動させ、傾ける必要があるかを正確に計算します。

簡単なステップでの動作原理：

1. 画像のスタックを取得する：最も歪んだ画像から始まり、「完璧な」基準画像へと向かって処理を進めます。
2. 揺らぎを測定する：画像を小さな断片に分割し、他の断片に対して各断片がどれだけ移動したかを測定します。
3. 数学的補正を行う：数学モデルを使用してこれらの移動を滑らかにし、歪んだ画像を「変形」させて、基準画像の上に完璧に合うようにします。
4. スーパーマップを作成する：整列後、データを結合します。これで、内部の結晶構造と表面の特徴の両方を完璧に位置合わせした単一のマップが得られます。

論文からの実用例

著者らは、この「デジタル接着剤」の威力を示すために、2つの特定の材料でテストを行いました。

1. 「硬質金属」パズル（WC-Co 複合材料）

• 材料：コバルト（Co）バインダーで固められた硬いタングステンカーバイド（WC）粒の混合物。切削工具に使用されます。
• 問題：結晶をマッピングするために使用される顕微鏡（EBSD）は、コバルトバインダーを認識するのが苦手です。ぼやけた写真が詳細を欠くように、実際よりもコバルトが少ないと誤認することがよくあります。これにより、硬い粒がどの程度密に詰まっているかについての誤った計算につながります。
• 解決策：TrueEBSD は、ぼやけた結晶マップと、鮮明でコントラストの高い表面写真を整列させました。その後、正しいコバルト領域を結晶マップに「描き足しました」。
• 結果：科学者たちは、コバルトがどの程度存在し、硬い粒が互いにどのように接触しているかを正確に測定できるようになり、材料の強度に関するはるかに正確な画像を得ることができました。

2. 「銅」パズル（粒界と空隙）

• 材料：銅金属のブロック。
• 問題：応力がかかると、通常は異なる結晶が接する境界に沿って、銅の中に微小な穴（空隙）が形成されます。科学者たちは知りたいのです：これらの穴はランダムに形成されるのか、それとも特定の種類の境界を避けるのか？
• 解決策：彼らは、結晶マップと微小な穴を示す写真を整列させました。画像が完璧に重ね合わされたことで、穴がどの種類の結晶境界に位置しているかを正確に確認できました。
• 結果：彼らは、特定の種類の境界（「シグマ 3 双晶境界」と呼ばれるもの）が盾のように機能し、穴がほとんど発生しないことを発見しました。一方、他の境界は脆弱です。これは、エンジニアがより長寿命な銅を設計する助けとなります。

これが重要な理由

このツールが登場する以前、科学者たちはこの整列を手動で行わなければならず、それは退屈で主観的でした（異なる人が異なる結果を得る可能性があります）。TrueEBSD はこのプロセス全体を自動化します。これは、手書きで地図を描くことから、交通や道路のズレを自動的に補正する GPS を使用するへとアップグレードするようなものです。

この論文は、このツールがオープンソース（誰でも無料で使用可能）、高速（素早く実行するための巧妙なコーディング技法を使用）、そして柔軟（あらゆる種類の顕微鏡設定を処理可能）であることを強調しています。これらの画像を完璧に一致させることで、以前はデータが混雑しすぎて組み合わせることができなかったため、解決不可能だった問いを科学者が問い、答えられるようになります。

技術概要

「TrueEBSD in MTEX: 相関顕微鏡法応用のための自動画像マッチング」の論文に関する詳細な技術的概要を以下に示します。

1. 問題提起

電子後方散乱回折（EBSD）や走査型電子顕微鏡（SEM）など、複数のイメージングモダリティからのデータを組み合わせる相関顕微鏡法は、包括的な材料特性評価に不可欠です。しかし、効果的な相関分析に対する大きな障壁は、異なるイメージングモード間の歪みに起因する空間的な不一致です。

• 歪みの原因: これには、試料の傾き、時間的ドリフト、電磁界のシフト、およびローリングシャッター効果が含まれます。
• 結果: 正確なピクセル単位の整合が取れていない場合、データを正確に重ね合わせることができません。これにより、結晶方位マップを相補的なデータ（例えば、相分率や表面粗さ）で補強することができず、体系的な誤差が生じます。
  • 例: 非対称な空間分解能により、EBSD は WC-Co 複合材料中のコバルト（Co）のような低原子番号の相の体積分率を体系的に過小評価します。
  • 例: 特定の粒界における空孔核生成部位を特定するには、BSE 画像で可視化される空孔と、EBSD で可視化される結晶粒界を整合させる必要がありますが、マップが不一致であればこれは不可能です。
• 従来ツールの限界: 元の TrueEBSD MATLAB プログラムは、手動介入（制御点）を必要とするか、ワークフローが硬直的であり、大規模または複雑なデータセットに対する自動化や柔軟性が制限されていました。

2. 手法

著者らは、EBSD データ解析に広く使用されている MATLAB ツールボックスであるMTEXのためのモジュール型オープンソースアドオンとして、TrueEBSD アルゴリズムを再実装しました。新しい実装（v2.1.0）は、クラスベースのワークフローといくつかの技術的強化を導入しています。

A. アルゴリズムワークフロー

このプロセスは、局所的なシフトを測定・補正することにより、画像（またはマップ）のシーケンスを最終的な参照画像に整合させます。

1. 入力: 歪んだ画像/マップのリスト（例：EBSD バンドコントラスト、FSE、BSE）。
2. リサンプリング: 画像は線形補間（画像用）または最近傍法（方位などのカテゴリカルデータ用）を用いて、共通のピクセルグリッドにリサンプリングされます。
3. 相互相関: アルゴリズムは、画像端部の関心領域（ROI）に対して高速フーリエ変換（FFT）ベースの相互相関を使用し、局所的なシフトベクトルを測定します。
4. モデル適合: 測定されたシフトは、物理的歪みタイプに基づいた数学的モデルに適合されます。
   • アフィン変換: 電磁界のシフト用。
   • 射影変換: 試料の傾き用。
   • 線形スプライン: ローリングシャッターのドリフト用。
5. 補正: 画像は適合モデルを用いてワープされ、参照画像とピクセル単位で整合するように補正されます。

B. 主要な技術的革新

• クラスベースアーキテクチャ: ソフトウェアは 3 つの主要なクラスを中心に構成されています。
  • @distortedImg: 画像シーケンスとメタデータを格納します。
  • @pairShifts: 変位場と ROI パラメータを格納します。
  • @trueEbsd: 補正ステップを管理する主要なワークフローオブジェクトです。
  • 利点: これにより、MTEX オブジェクト（例：画像 alongside EBSD 方位を格納する）との簡単な統合や、異なる実験設定間での再利用が可能になります。
• 自動 ROI 最適化: 固定された ROI サイズの代わりに、アルゴリズムは ROI 幅を反復的に調整します。整合後の残差誤差が 2 ピクセルを超えた場合、ROI サイズは 2 倍にされます。これにより、特徴に富んだ相関の必要性と画像端部の「除外領域」の間でバランスが取られます。
• パフォーマンス最適化: 計算集約的な相互相関関数は、MEX ファイル（MATLAB コードからコンパイルされた C バイナリ）として書き換えられました。これにより、並列計算ツールボックスへの依存関係が排除されるとともに、処理速度が大幅に向上しました。
• グラフィカルユーザーインターフェース（GUI）: 新しい GUI を使用すると、ユーザーはコードを書かずにデータ（Oxford Instruments からの HDF5 コンテナを含む）をロードし、画像をプレビューし、シーケンスを並べ替え、パラメータを調整できます。

3. 主要な貢献

1. ソフトウェアの再構築: 自立したスクリプトから、MTEX の堅牢なデータ処理および結晶学的解析ツールを活用する、完全に統合された MTEX アドオンへの TrueEBSD の移行。
2. 自動化: 手動の制御点を不要にし、プロセスを完全に自動化することで、大規模データセット（例：3D EBSD）に適したものにしました。
3. FAIR 原則: コードは GitHub で管理されており、発見可能（Findable）、アクセス可能（Accessible）、相互運用可能（Interoperable）、再利用可能（Reusable）であることを保証しています。
4. 強化された柔軟性: モジュール設計により、ユーザーはコアコードを変更することなく、異なる画像タイプを組み合わせることができます（例：異なる電圧や傾きで取得された FSE および BSE 画像の組み合わせ）。

4. 結果：ケーススタディ

ケーススタディ 1: WC-Co 複合材料（相分率と連続性）

• 目的: コバルト（Co）相分率とタングステンカーバイド（WC）粒の連続性を正確に測定する。
• 手法: EBSD マップ（20 kV）を FSE 画像（10 kV）に整合させた。FSE 画像は、分解能の限界により EBSD が誤って同定することが多い相対比（Co 対 WC）を提供した。
• 知見:
  • 相分率: 標準的な EBSD は、FSE/Thermo-Calc モデルと比較して Co 含有量を約 50% 過小評価していた。補強されたマップはこれを修正した。
  • 連続性: WC 粒の連続性（他の WC 粒と共有される粒界の割合）が再計算された。
    • 元の EBSD は、微細粒組織において連続性を過大評価していた（BSE 線形切断法では 0.69 対 0.59）。
    • FSE 補強 EBSD はより正確な値（0.49）を提供し、EBSD が薄い Co 層を見逃しているため、WC 粒が接触していないにもかかわらず接触しているように見えることを明らかにした。
  • 結論: この手法は、個別の解析では不可能な定量的な結晶学的測定を可能にする。

ケーススタディ 2: 銅多結晶体（粒界空孔）

• 目的: 特定の粒界（GB）および三重点（TP）のクリープ空孔形成に対する感受性を決定する。
• 手法: 空孔が暗いピクセルとして現れる BSE 画像（0°傾き）と EBSD マップを整合させた。空孔をセグメント化し、EBSD 方位データ上にマッピングした。
• 知見:
  • 空孔の位置: 空孔の 90.2% が粒界上またはその近傍に位置していた。
  • 結晶学的解析: 方位不一致解析により、$\Sigma3$ 双晶粒界（60°/<111>）が空孔を含む粒界の中で著しく過少代表されていることが明らかになり、これらが空孔核生成に対して非常に耐性が高いことを示した。
  • 三重点: 特定の三重点タイプに耐性や感受性は見られず、その分布は背景の微細構造と一致していた。
  • 意義: 相関データを用いて、微細構造特徴と破壊メカニズムを統計的に相関させる能力を実証した。

5. 意義

• 定量的精度: 相補的なイメージングモダリティを活用することで、EBSD データの体系的な誤差（相の過小評価など）を解消し、粒の連続性などのより正確な微細構造指標へと導く。
• 自動化とスケーラビリティ: 手動ステップを排除しコード速度を最適化することで、TrueEBSD-MTEX は、以前は労働集約的であった大規模で複雑なデータセット（例：3D EBSD、in-situ 実験）の処理を可能にする。
• コミュニティへの影響: オープンソースの MTEX アドオンとして、相関顕微鏡法への参入障壁を下げ、研究者が単一の確立されたエコシステム内で高度な空間登録およびその後の結晶学的解析を実行できるようにする。
• 対処された限界: このツールは全体的な歪みをよく処理するが、著者らは、イオン研磨試料の表面粗さなどに起因する高度に局所的な非線形歪みは、依然として手動介入を必要とするか、画像端部への外挿が困難であると指摘している。

要約すると、MTEX における TrueEBSD は、相関顕微鏡法における重要な進歩を表しており、手動で誤りが生じやすいタスクであった画像整合を、材料微細構造に対するより深い定量的洞察を解き放つ、堅牢で自動化されたワークフローへと変革している。