Intelligent Vision-Based Pose Estimation with the Turn-of-Nut Method for Bolt Monitoring

現代の世界の隠れた構造において、超高層ビルの鋼鉄製の梁から航空機の複雑なフレームに至るまで、無数の金属製ファスナーがすべてを繋ぎ止めている。これらはボルトと呼ばれる、単純なネジ付きの円筒形であり、「プリロード」と呼ばれる隠れた力によって固定状態を維持している。ボルトが締め付けられると、それはわずかに伸び、結合された部品をその場にロックする強力な締結力を生み出す。しかし、エンジンの絶え間ない振動や、橋の荷重の変化、あるいは機械の規則的な衝撃は、この張力を徐々に侵食していく。ボルトが緩むにつれて接合部が緩み、壊滅的な失敗を招く可能性がある。数十年にわたり、これらの接続部が締まった状態であることを確認することは、労働集約的な作業であり、多くの場合、検査員がハンマーでボルトを叩いて音の変化を聞いたり、重いレンチを使って回転していないかを確認したりする必要があった。センサーをボルトに埋め込んで監視することも可能だが、これらのデバイスは高価であり、複雑な配線を必要とし、過酷な環境下では故障しやすい。長年の課題は、ボルトに触れたり構造を変えたりすることなく、ボルト内部の目に見えない張力を「見る」方法を見つけることだった。

ハルビン工程大学とバハウディン・ザカリア大学の研究者たちは、ボルトとそのナットをカメラによって解かれる視覚的なパズルとして扱う新しいアプローチを開発した。物理的なセンサーや人間の耳に頼る代わりに、彼らは2台のカメラを使用して、ボルトとそのナットを同時に監視するシステムを構築した。核心となるアイデアは単純かつ精密である。もしボルトが緩んでいるならば、ナットとボルトの頭部は互いに相対的に回転する。この微細な回転を極めて正確に測定することで、システムはどれだけの張力が失われたかを正確に算出できる。これを実現するために、チームは高度なコンピュータビジョンモデル、すなわちYOLOv11-poseとして知られる人工知能の一種を用いて、金属表面の特定の点を見分けるよう訓練した。彼らはソフトウェアに対し、ボルトの頭部とナットの両方にある5つの明確なランドマーク（指標）を識別するように学習させた。それは、金属片の向きを定義する4つの固定された点と、回転の基準として機能する1つの動くマーカーである。

プロセスは、カメラが組み立て部品の画像をキャプチャすることから始まる。カメラは常にボルトに対して完全に整列しているわけではないため、画像は遠近法によって歪むことがある。これは、まっすぐな棒が斜めの角度から見ると曲がって見えるのと同様である。これを補正するために、システムは画像を平坦化する数学的な変換を適用し、ボルトとナットの正面を捉えた完璧な正面図を作成する。これにより、コンピュータは移動するマーカーの角度を高精度で測定できるようになる。マーカーの角度をボルト上のものとナット上のものと比較することで、システムは両者の間の相対的な回転を算出する。この測定値は、「ターン・オブ・ナット（ナットの回転法）」に基づいた機械モデルに入力される。これは、ナットがどれだけ回されたかとボルトがどれだけ伸びるかの関係を示す標準的な工学原理である。金属部品の剛性と初期の締め付け強度を知ることで、システムはその微細な回転角を特定の力値へと変換し、エンジニアに対して、どれだけのプリロードが残っているかを正確に伝えることができる。

この手法をテストするために、研究者たちは、ステンレス鋼製の特定のM20サイズの大型ボルトを用いた制御された実験を設定した。彼らは組み立て部を締め付け、その後、デジタルロードセル（力を測定するための非常に敏感なスケール）を使用して、実際の張力を記録した。そして、ロードセルの読み取り値と、カメラシステムによって生成された推定値を比較した。結果は有望であった。回転角を測定する際、システムは極めて正確であり、平均誤差は1度未満、最大誤差はわずか2.4度であった。この角度を力測定値に変換する際、システムはプリロードを平均0.63キロニュートンの誤差で推定した。ボルトが数百キロニュートンの力を受けることもある産業安全の文脈において、このレベルの精度は、この手法が重大な緩みを検知する上で実行可能であることを示唆している。

しかし、本研究は視覚だけに頼ることの限界も明らかにした。研究者たちは、システムが照明条件に敏感であることを発見した。周囲の明るさを下げると、測定の精度が低下した。光が暗くなると、システムはマーカーの正確な位置を特定することが困難になり、力の計算における誤差が大きくなった。明るさが75%減少した場合、力の推定における平均誤差は3キロニュートン近くまで上昇した。これは、この技術が制御された環境下ではうまく機能するものの、信頼性を確保するためには明確な視認性と一定の照明が必要であることを示している。また、研究者たちは、錆、油、または塗料などの表面状態がカメラによるマーカーの認識を妨げる可能性があることも指摘しており、将来のバージョンでは、汚れたり劣化したりした産業環境にも耐えうる堅牢性が必要であることを示唆している。

この研究の意義は、侵襲的で高価な監視方法を、非接触で低コストなソリューションに置き換える可能性にある。回転の視覚的検出と実証済みの機械モデルを組み合わせることで、研究者たちは、構造物に穴を開けたりワイヤーを取り付けたりすることなく、重要な構造物の健全性を監視する方法を実証した。現在の研究は、実験室の設定における単一の種類のボルトに限定されているが、その枠組みは明確な進むべき道を示している。システムは、デュアルカメラのセットアップが、構造物を支える内部の力を推定するのに十分な精度で、ボルトとナットの相対的な動きを追跡できることを成功裏に証明した。この技術が成熟し、より多様なボルトやより困難な現実世界の条件下でテストされるにつれ、それは橋、風力タービン、航空機の安全を確保するための標準的なツールとなり、造られた世界の目に見えない力を、絶え間ない監視の下に置くことになるだろう。