Differentiable Voronoi Ray Tracing Beyond Rasterization Speeds

コンピュータグラフィックスの世界には、速度と柔軟性の間の根本的なトレードオフが長年存在してきました。数十年にわたり、画面上にリアルな画像を作成する最も速い手法は、ラスタライズと呼ばれる技術でした。3Dシーンを見つめる画家が、それを平らなキャンバスに投影し、ピクセルを一つずつ塗りつぶしていく様子を想像してみてください。この手法は非常に高速であり、私たちが日々目にするビデオゲームや映画を支えていますが、カメラレンズのボケや広角ビューによる歪みといった複雑な光学効果を扱うのには苦労します。これらの効果を得るためには、ソフトウェアは描画プロセスに特別な複雑なルールを追加しなければならず、それがしばしば処理を遅らせたり、エラーを引き起こしたりします。これに対する代替案は、光が実際にどのように伝わるかを模倣する手法であるレイトレーシングです。平らな画像を投影する代わりに、コンピュータはカメラからシーンに向かって不可視の光線を放ち、何に当たるかを確認します。このアプローチは、追加のルールなしにすべてのトリッキーな光学効果を自然に処理できますが、歴史的にはリアルタイムでの使用には遅すぎ、わずか数フレーム毎秒を計算するためだけに膨大な計算能力を必要としてきました。

スウェーデンの研究チームは、画家の速度か、光線を放つ者の柔軟性かのどちらかを選ばなければならないという考えに、今、挑戦しています。彼らは、光線を放つアプローチを用いながらも、リアルタイムで使用できるほど高速に動作する「VoroTracing」と呼ばれる新しいシステムを開発しました。彼らの研究は、3D空間を整理する特定の方法に焦点を当てており、それは、ハニカム構造の細胞のように、シーン内のオブジェクトにフィットする形状を持つ不規則な泡（バブル）のパッチワークへと空間を分割するものです。これらの泡の中をスマートかつ組織的にナビゲートすることで、彼らのシステムは、複雑な環境の中を光線が通過する様子を、従来の最も速い手法に匹ら、あるいは時にはそれを上回る速度で追跡することができます。

研究者たちはまず、なぜレイトレーシングがこれほどまでに遅かったのかを探ることから始めました。彼らは、主なボトルネックは光線が物体にどこで当たるかを見つける数学的な問題だけでなく、コンピュータが旅の各ステップごとにどれほど膨大なデータをロードして処理しなければならないかにあることを発見しました。これを高速化しようとするこれまでの試みでは、コンピュータが各ステップごとに情報を読み込みすぎて動けなくなったり、固形物に到達する前に空白の空間を長く彷に徘徊したりすることがよくありました。チームは、これを成功させるためには、シーンの構築方法からコンピュータチップがデータを処理する方法に至るまで、光線の旅全体を再設計する必要があることに気づきました。

彼らはまず、シーンの表現方法を変更することから始めました。各バブルに対して、見る角度によって変化する単一の滑らかな色を与える代わりに、各バブルに非常に詳細なテクスチャマップを与えました。これにより、単一のバブルが複雑なパターンや詳細を保持できるようになり、レンガの壁や木の葉を表示するために何百万もの小さなバブルを作成する必要がなくなりました。また、コンピュータがいつ探索を止めるかを決定する方法も変更しました。オブジェクト間の空隙を完全に透明にし、オブジェクトの表面を完全に固形であるとシステムに学習させることで、光線は空気中を減速することなく移動し、表面に当たった瞬間に停止できるようになりました。これにより、コンピュータが空白の空間の色を計算するために時間を浪費することを防ぎました。

プロセスをさらに高速化するために、研究者たちはコンピュータメモリにおけるバブルの保存方法を再編成しました。3D世界で近くに位置するバブルが、コンピュータのメモリ内でも近くに保存されるようにデータを配置しました。これにより、グラフィックスカードは、メモリバンク内をあちこち飛び回ることなく、一連の光線に関する必要な情報を一度に効率的に取得できるようになりました。また、最終的な画像に影響を与えないほど微かなバブルを無視するようにコンピュータに指示するスマートなフィルターも追加し、計算自体をスキップさせました。

この再設計の結果は驚くべきものでした。標準的な複雑な3Dシーンを用いてテストした際、新しいシステムはハイエンドのグラフィックスカード上で毎秒623フレームの速度で画像をレンダリングしました。これは、光線を用いた従来の最高の手法よりも3倍以上速く、現在この分野で使用されている最も速い伝統的な絵画ベースの手法よりも大幅に高速です。生成された画像は、より低速な手法と同等の鮮明さとリアリズムを持ち、品質の低下もありませんでした。おそらく最も重要なことは、このシステムは光線を使用しているため、異なるカメラ効果を用いた画像のレンダリングに即座に切り替えられることです。コアとなるソフトウェアを変更することなく、研究者たちは光線の経路を変更するだけで、フィッシュアイレンズの歪み、動いているカメラのボケ、あるいはポートレートレンズの浅い被写界深度を持つ画像を生成することができました。

この成果は、システムが最初からハードウェアを考慮して設計されていれば、レイトレーシングはリアルタイムアプリケーションには遅すぎるという古い信念が、もはや真実ではない可能性があることを示しています。シーンの保存方法、光線の移動方法、そしてコンピュータがデータを処理する方法を注意深く共同設計することで、研究者たちは、現代のビデオゲームの速度と、実際の光が持つ自然な柔軟性の両方を得ることが可能であることを証明しました。彼らはコードを公開して他者が利用できるようにしており、すでにスマートフォン上でスムーズに動作することを実証している、仮想現実、自動運転、モバイルデバイスなどの将来的な応用への扉を開いています。この研究は、これからのリアルなコンピュータグラフィックスの未来は、速度とリアリズムのどちらかを選ぶことではなく、それらを共存させるための新しい方法を見出すことにあることを示唆しています。