Sterilizable Scene Graph Generation for Operating Rooms

手術室の中では、命を救う処置に伴う静かな緊張感が空気に満ちています。外科医の手のあらゆる動き、手術器具のあらゆる変化、そして処置されている組織のわずかな変化の一つひとつが、一つの物語を紡いでいます。数十年にわたり、コンピュータはこの物語を読み解くことに苦心してきました。コンピュータは画面上のピクセルを見ることはできますが、目に見える物体同士の関係性を理解することは容易ではありません。例えば、金属製の把持鉗子が組織を掴んでいるのか、あるいはフックが組織を切り進んでいるのかといったことです。このように場面をマッピングし、単に何が存在するかだけでなく、物事がどのように相互作用しているかを理解する能力は、「シーングラフ生成」と呼ばれます。これは、機械に手術の全体像を理解させるための鍵であり、将来的にはリアルタイムのガイダンスを提供したり、手術の自動記録を作成したりすることで、医師を支援することにつながります。しかし、現在この作業を行うのに十分な性能を持つコンピュータは、巨大なワークステーションを必要とし、それらは大きすぎ、熱を持ちすぎ、そして手術室という繊細な環境において清潔（滅菌状態）を保つのが困難です。

研究チームは、この複雑な思考プロセスを、シンプルなファンレスデバイスに収まるサイズまで縮小する方法を見出しました。彼らは「SG-NCA」と呼ばれる新しい手法を開発しました。これにより、コンピュータは手術ビデオを観察し、道具や身体部位を特定した上で、それらが互いにどのように関係しているかを記述した構造化された場面マップを即座に構築できるようになります。この画期的な成果の鍵は、システムの構築方法にあります。この種の人工知能を通常動かしている巨大で重厚なソフトウェアモデルを使用する代わりに、彼らは単純な細胞が隣接する細胞に基づいて自身の状態を更新する仕組みにヒントを得た、より軽量なアプローチを採用しました。最も一般的な物体から始めて、徐々に種類を増やしていくステップバイステップのカリキュラム形式で学習させることで、眼科手術や胆嚢手術における特定の器具や解剖学的構造を認識できるように訓練したのです。その結果、研究室で使用される巨大なモデルと同等の性能を発揮しながら、内部設定（パラメータ）の数は55分の1に抑えられたシステムが完成しました。

研究者たちは、精密さが極めて重要となる二つの一般的な処置である、白内障手術と胆嚢摘出手術のビデオを用いて、この新しいシステムをテストしました。その結果、彼らの軽量なモデルは、比較対象となる既存のモデルに比べて非常に小さいにもかかわらず、手術器具や身体部位を既存の最高水準の手法と同等の精度で特定できることが分かりました。比較対象となった標準的なモデルには、コンピュータが学習のために調整する内部の「つまみ」や「ダイヤル」である数百万ものパラメータが含まれていましたが、彼らの新システムは、そのごく一部のパラメータしか必要としませんでした。実際、システム全体があまりに小さいため、専用のグラフィックスカードや強力なサーバーを必要とせず、標準的なスマートフォンや小型の低電力コンピュータボード上で動作させることが可能です。これは手術室において非常に重要な意味を持ちます。現在この作業に使用されている大型コンピュータは、空気を吹き出すファンを備えていることが多く、それが埃や細菌を拡散させるリスクがあるため、滅菌が必要な手術環境では問題となります。また、すでに機器で溢れている手術室において、貴重なスペースを占有してしまいます。対照的に、新しいシステムは、密閉されたファンレスデバイス上で動作させることができるため、拭き取りや消毒が容易であり、空気を清潔に保ち、データを室内のうちに安全に保持することができます。

単に物体を識別するだけでなく、このシステムは手術の流れを理解する能力も示しました。例えば、「把持鉗子が胆嚢を牽引している一方で、フックがそれを解離している」といった、進行中の状況を説明する簡潔な文章を生成することができました。この能力は、システムが単なる検知を超えて、より深い手術のナラティブ（物語）を理解できることを示唆しています。また、チームはこの技術を「エッジ」で展開できることも示しました。つまり、処理が遠く離れたクラウドサーバーに送られるのではなく、患者の枕元（ベッドサイド）で行われるということです。これにより、患者のデータのプライバシーが守られ、インターネット経由で情報を送る際に生じる遅延も排除されます。これほど小さなシステムが実際の複雑な手術を扱えることを証明したことで、研究者たちは、高度な手術インテリジェンスが巨大で滅菌不適合な障壁に阻まれることなく、手術の流れに自然に溶け込む、手頃で衛生的なハードウェアを通じて利用可能になる未来への扉を開いたのです。