静かなブルーベリー農園の列の中で、毎年夏になるとあるパラドックスが繰り広げられます。生鮮市場向け、つまりスーパーマーケットの棚に並ぶための、ふっくらとして傷のないベリーは、手作業で収穫されなければなりません。ブッシュを揺らして落ちてくる果実を受け止める機械は存在しますが、それらは粗すぎます。デリケートな皮を傷つけ、まだ熟していないベリーまで剥ぎ取ってしまうため、ジャムや加工用には適しているものの、果肉が潰れた混合物になってしまいます。問題は、ブルーベリーが一斉に熟すわけではないことです。一つの小さな房の中でも、熟して食べ頃の深い青色のベリーのすぐ隣に、硬くて緑色のベリーが並んでいることがよくあります。熟した果実だけを傷つけずに収穫するためには、収穫者は未熟なものを枝に残したまま、成熟したベリーを茎から優しく引き離さなければなりません。これには、これまでは自動化が不可能とされてきた、触覚と判断力のレベルが求められるため、農家は減少する季節労働者の力に頼らざるを得なくなっています。
研究チームは、この特定のパズルを解決するために設計されたロボットを開発しました。彼らはその創造物をCLASPと呼び、個々のベリーを一つずつ掴もうとするのではなく、房全体を一つのユニットとして扱う機械です。ロボットの「手」は、人間の収穫者が親指を使ってベリーを茎に対してこすりつける方法に触発された、シリコン製の柔らかいローリングバンドでできています。ロボットが房を見つけると、これらの柔らかいバンドを果実に巻き付け、回転させ始めます。バンドが回転するにつれて、穏やかな摩擦が生じ、熟したベリーを次々と茎から引き離しますが、まだ未熟でしっかりと付着しているものはそのまま残ります。ロボットは、どれくらいの力で引いているかを知るために力センサーを必要としません。代わりに、モーター内の電流を「聴く」のです。ベリーが抵抗してモーターがより強く働くと、ロボットは力が加わっていることを察知し、熟した果実を外すのに十分でありながら、緑色のものを放置しておくのに十分なほど弱いという、安全な範囲内に留まるようグリップを調整します。
このシステムは、ターゲットを見つけるための2段階のビジョンプロセスに基づいています。まず、ロボット本体に搭載されたカメラが、遠くから果実の房をスキャンします。潜在的なターゲットが見つかると、ロボットは腕を近づけ、手持ちの2番目のカメラを果実に至近距離まで持っていき、詳細な外観を確認します。この接写ビューによって、ロボットは房の形状と向きを理解し、柔らかいバンドを正しく配置できるようになります。その後、ロボットは精密な一連の動作を実行します。腕を房へと動かし、バンドを閉じ、ローリング動作を開始します。ロボットは、熟したベリーが残っていないかを定期的に確認しながら、このプロセスを継続し、房から成熟した果実がなくなるまで行います。
いくつかのブルーベリー農園で行われたフィールドテストにおいて、このロボットはこのアプローチが機能することを証明しました。25個の房をシステムに提示したところ、ロボットは23個の房を正常に把握して収穫し、92パーセントの成功率を達成しました。失敗の原因は収穫メカニズム自体によるものではなく、密集した葉や枝が道を塞いでいたために、ロボットが物理的に房に到達できなかったことにありました。ロボットが果実に到達したとき、その動きは優しかったです。収穫されたベリーは、人間の手で摘み取られたものよりもわずかに柔らかい程度でしたが、研究者たちはこの差を、ロボットによる損傷ではなく、主に収穫から測定までの時間差によるものと考えています。これらのユニットの製作コストは約3,326ドルであり、この価格帯は、この技術が実社会での使用に向けてスケールアップ可能であることを示唆しています。
研究者たちはまた、ベリーを茎から引き離すために必要な力を測定し、熟した果実と未熟な果実の間に明確な差があることを見出しました。熟したベリーは緑色のものよりもはるかに低い力で脱落するため、ロボットが未熟なものを乱すことなく熟した果実を収穫できる「窓(許容範囲)」が存在していました。モーター電流を制御してこの範囲内に留まるようにすることで、ロボлоトは、従来の機械が失敗してきた課題である、房レベルでの選択的な収穫が可能であることを証明しました。このロボットはまだ人間の収穫者ほど速くはありませんが、1分間に約32個のベリーを扱い、人間の55個と比較して、機械としては有望なペースで動いています。この研究は、ボトルネックはもはや果実を優しく摘む能力ではなく、ロボットの移動速度と、農園の厚い植生の中をナビゲートする能力にあることを示唆しています。この成果は、最も労働集約的な生鮮市場向けブルーベリー生産の工程を自動化するための重要な一歩であり、機械に人間の手の繊細な感触をもたらす方法を提示しています。
技術要約:CLASP – ブルーベリーの生鮮市場向けクラスターレベル自律選択的収穫ロボット
問題提起
ブルーベリーの生鮮市場向け収穫は、深刻なボトルネックに直面している。それは、果実の傷みを避け、品質を維持するために、選択的かつ穏やかな収穫が求められることである。列間を走行する機械式収穫機は高速であるが、非選択的であるため、著しい損傷(16〜26%)を引き起こし、加工用市場への利用を制限している。一方で、既存のロボット収穫システムは、通常「一粒ごと」のパラダイムに従い、個々の果実を標的にする。このアプローチは、ブルーベリーのサイズが小さく、密集したクラスター(房)を形成しており、単一のクラスター内で成熟度が異なるため、ブルーベリーにおいては非効率である。さらに、既存の柔軟なグリッパーは、隣接する果実が互いに遮蔽し合うというタイトな幾何学的構造において、成熟した果実のみを選択的に切り離し、未熟な果実を付着させたままにするために必要な、特定の力制御機能が欠けている。
手法
著者らは、個々の果実レベルではなく、クラスターレベルでの動作を設計したシステムであるCLASP(Cluster-Level Autonomous Selective Picking)を提案している。本システムは、以下の3つのコアコンポーネントで構成される。
機械設計(SARB-グリッパー):
ロボットは、総部品コストが約3,326ドルであるカスタム6自由度マニピュレータ(RRPRRRアーキテクチャ)を使用している。エンドエフェクタは、ソフト・アクティブ・ローリング・バンド・グリッパー(SARB-Gripper)である。人間の収穫者に着想を得たこのグリッパーは、ソフトシリコーンバンド(Dragon Skin 20)を備えた2本の指を用いている。単一のベリーを掴むのではなく、バンドがクラスターを包み込み、果実に対して回転運動を行う。このローリング動作により、ベリーと果梗(かこう)の接合部に摩擦が生じ、果実を脱離させる。決定的なのは、システムがセンサレス力制御を採用している点である。牽引力は、指のサーボからのモーター電流フィードバックを介して制御される。これにより、システムは適用される荷重を、成熟した果実を脱離させるには十分であり、かつ未熟な果実を脱離させる閾値よりは低い、特定の範囲内に維持することができる。
認識パイプライン(グローバルからローカルへ):
遮蔽の問題や、高密度なクラスター内での個々のベリーの局在化の困難さに対処するため、システムはグローバルからローカルへの認識戦略を採用している。
- グローバル: アイ・トゥ・ハンド方式のステレオカメラ(ZED 2)が、候補となるクラスター領域を検出し、粗い位置特定を行う。
- ローカル: エンドエフェクタに取り付けられたアイ・イン・ハンド方式のカメラ(Intel RealSense D435)が、クラスターの3D形状と向きを精緻化する。
- 検出: カスタムのYOLO26nモデルは、4つの品種をカバーし、様々な照明条件下でのマルチシーズン・データセット(2023年〜2026年)を用いて学習されており、ベリーを検出・カウントする。このモデルは「未熟」と「成熟」のクラスを区別し、「半熟」は視覚的な曖昧さから未熟クラスに統合される。
- 制御とプランニング:
- 把握プランニング: システムは、点群に対する主成分分析(PCA)を用いて、クラスターの茎軸の向きを推定する。そして、接触を最大化し、茎の曲がりを最小限に抑えるために、グリッパーのローリングバンドをクラスター軸に合わせるような把握方向を計画する。
- 力制御: グリッパーコントローラは、閉ループ電流フィードバック機構を使用する。ベースライン電流を設定し、ローリングバンドを制御するために能動的な閾値を適応させる。システムは、モーター電流が無負荷レベルに戻ったとき(クラスターが空になったことを示す)、またはビジョンが成熟したベリーが残っていないことを確認したときに、収穫を終了する。
主な貢献
- クラスターレベルの動作原理: 本論文は、精密な個別の果実操作ではなく、制御された力を用いて選択的な脱離を実現することにより、クラスターを主要な相互作用単位として扱う収穫パラダイムを導入している。
- センサレス力制御グリッパー: SARB-グリッパーは、専用の力/トルクセンサを用いずに、モーター電流の調整を通じて選択的な脱離が可能であることを示し、低コストでスケーラブルなソリューションを実現した。
- 統合システムとデータセット: 著者らは、多様なフィールド条件下でのブルーベリー検出のためのマルチシーズンかつオープンソースのデータセットとともに、フィールドで検証された完全に統合された自律システムを提供している。
実験結果
- 力の特性評価: フィールド測定により、脱離力の明確な分離が確認された。成熟したベリーは平均0.66 Nで脱離したが、未熟なベリーは2.47 Nを必要とした(比率は3.7)。SARB-グリッパーは、指令された牽引力を誤差3.7%未満で再現することに成功し、選択的脱離のウィンドウ内での動作を可能にした。
- 認識性能: 検出モデルは、ホールドアウト・テストセットにおいてmAP50 0.767およびF1スコア0.730を達成した。検出漏れ(20〜25%)が主要なエラータイプであったが、システムは複数のフレームにわたってカウントを集計することで、早期終了を回避している。
- フィールド試験: 25個の提示されたクラスターを用いたエンドツーエンドのフィールドテストにおいて、CLASPは**23個のクラスター(成功率92%)**を自律的に把握し、収穫した。失敗の原因は、収穫メカニズム自体ではなく、認識およびアームのポジショニングの問題(クラスターへの到達不能)に帰せられた。
- 効率と品質: 手動で位置合わせを行った場合、グリッパーは毎分32ベリーの速度で収穫し、これは人間の収穫者(毎分55ベリー)の約58%の速度であった。ロボットによって収穫されたベリーの収穫後の硬度は、手摘みの参照品よりも15%低かった。著者らは、この差は機械的な負荷と測定までの時間間隔の長さの両方に起因する可能性があり、ロボットによる損傷の理論的な上限値を示していると述べている。
意義と主張
本論文は、CLASPが、自動化の導入を制限してきたブルーベリーの生鮮市場向け特有の課題に対処する、スケーラブルで低コストなアプローチを提供すると主張している。選択性のメカニズムを、複雑な視覚的な一粒ごとの識別から、力制御された機械的相互作用へと移行させることで、高価なセンサや計算負荷の高い果実ごとのポーズ推定を回避している。著者らは、現在のシステムは実現可能性(92%の把握成功率)を示しているものの、主な制限は、脱離メカニズム自体ではなく、システムレベルの動作計画と移動時間にあると強調している。本研究は、スループットと衝突回避型の軌道計画の向上に向けた基礎を築くものである。
毎週最高の computer science 論文をお届け。
スタンフォード、ケンブリッジ、フランス科学アカデミーの研究者に信頼されています。
受信トレイを確認して登録を完了してください。
問題が発生しました。もう一度お試しください。
スパムなし、いつでも解除可能。
週刊ダイジェスト — 最新の研究をわかりやすく。登録