Locomotion analysis of a quadruped interacting with the lunar granular surface

기술 요약: 달의 입상 표면과 상호작용하는 4족 보행 로봇의 보행 분석

문제 정의
다리형 로봇은 바퀴형 로버가 이동하기 어려운 달의 구덩이나 용암 동굴과 같은 복잡한 지형을 탐사하기 위해 점점 더 많이 제안되고 있다. 그러나 달에 로봇을 배치하는 것은 에너지 제약, 열 관리, 그리고 달 표면의 특수한 성질을 포함한 독특한 과제들을 제시한다. 달의 레골리스(regolith)는 입상(granular)의 모래와 같은 기질로, 이는 강체 접촉 모델(예: 쿨롱 마찰)을 기반으로 한 보행 제어에서 흔히 사용되는 강성 지면 가정과는 다르게 동작한다. 강성 접촉 모델로 훈련된 현재의 강화 학습(RL) 정책은 발 아래에서 발생하는 토양의 흐름과 점성 항력을 고려하지 못해, 부드럽고 변형 가능한 표면에서 실패할 가능성이 높다. 이러한 불일치는 달 임무의 제한된 전력 예산을 고려할 때 치명적인 실패 요인인 불안정성, 추적 성능 저하 및 과도한 에너지 소비를 초래할 위험이 있다.

방법론
본 연구는 로봇의 발과 입상 표면 간의 상호작용을 분석하기 위해 테라다이내믹(terradynamic) 모델을 강화 학습 시뮬레이션 환경 내에 구현하였다.

• 테라다이내믹 모델링: 저자들은 달 표면을 점성 입상 매질로 취급하는 Li 등[15]의 접촉 모델을 통합하였다. 이 모델은 단순 마찰 대신, 푸리에 계수와 토양의 조밀도 및 입자 크기를 나타내는 스케일링 인자($\zeta$)로 매개변수화된 침투 깊이, 공격 각도(angle of attack), 침입 각도(angle of intrusion)의 함수인 응력을 발의 접촉 면적에 대해 적분하여 양력 및 항력($F_z, F_x$)을 계산한다. 모델은 발의 메시(mesh) 표현 위에 이산화되어 다양한 발 형태에 대한 일반화를 가능하게 한다.
• 시뮬레이션 환경: 시뮬레이션은 RaiSim에서 수행되었다. 두 가지 환경이 비교되었다:
  1. 강성 접촉(Rigid Contact): 구형 발 모델을 사용한 표준 쿨롱 마찰 모델.
  2. 연성 접촉(Soft Contact): 가상 토양층($z_H = 0.05$m) 속으로 침투하는 반구형 메시 발(688개 면)을 사용하는 테라다이내믹 모델.
• 로봇 및 제어: Arachnid 힙 구성을 가진 Magnecko 로봇과 유사한 13.5 kg의 4족 보행 로봇이 사용되었다. 보행은 근사 정책 최적화(PPO)를 사용하여 훈련된 심층 강화 학습 정책을 통해 제어되었다. 이 정책은 관측값(베이스 속도, 관절 상태, 중력 투영, 속도 명령)을 목표 관절 각도로 매핑한다.
• 훈련 전략: 연성 환경에서의 밑바닥부터의 훈련 불안정성을 해결하기 위해 전이 학습(transfer learning)이 채택되었다. 강성 지형에서 800 에피소드 동안 훈련된 정책이 연성 지형 환경 훈련을 위한 초기값으로 사용되었다. 또한 경사도와 거칠기를 점진적으로 높이는 커리큘럼 학습(curriculum learning)이 사용되었다.
• 성능 지표: 연구는 보행 특성을 정성적으로 분석하였으며, 관절 토크, 기계적 출력, 전력 손실(모터, 기어 및 권선 효율 고려), 총 에너지 소비 및 기계적 이동 비용(MCOT)을 정량적으로 측정하였다.

주요 결과
강성 접촉 환경과 연성 접촉 환경에서 훈련된 정책을 비교한 결과, 보행 동작과 효율성 측면에서 유의미한 차이가 드러났다.

• 보행 특성: 연성 접촉 환경은 질적으로 다른 보행을 필요로 했다. 로봇은 미끄러짐 힘을 최소로 하기 위해 더 높은 듀티 사이클(duty cycle)과 작은 보폭을 채택한 반면, 강성 접촉 보행은 높은 충격 반응에 의존하며 넓은 보폭을 활용했다. 연성 접촉 보행은 강성 베이스라인에 비해 더 많은 측면 미끄러짐(sideslip)과 감소된 추적 정확도를 보였다.
• 토크 및 전력:
  • 관절 토크: 강성 충격에 비해 접촉력의 충격이 낮기 때문에 연성 지형에서의 최대 관절 토크는 일반적으로 더 낮았다.
  • 기계적 출력: 역설적이게도, 로봇을 이동시키는 데 필요한 기계적 출력은 연성 지형에서 더 낮았다.
  • 전력 손실 및 총 에너지: 낮은 기계적 출력에도 불구하고, 연성 지형에서의 총 에너지 소비량은 더 높았다. 이는 스탠스(stance) 단계와 스윙(swing) 단계 모두에서 지속적인 접촉력이 발생하여 모터 및 변속 시스템의 전력 손실이 증가했기 때문이다. "부드러운" 상호작용은 입상 매질을 밀고 나가기 위한 지속적인 노력을 요구하며, 이는 동일한 거리 이동 시 더 큰 에너지 소모를 야기한다.
• 안정성 및 이상치: 연성 접촉 시뮬레이션은 총 에너지와 전력의 분산이 더 높게 나타났으며, 최대값이 강성 접촉 사례를 크게 상회했다. 이는 로봇이 레골리스에 끼이거나 불안정한 역학 관계를 경험하여 회복을 위해 높은 전력이 필요한 상황이 발생함을 나타낸다.

의의 및 주장
본 논문은 입상 지형 모델링을 외계 행성용 레그 시스템 및 보행 제어기의 공동 설계(co-design)에 반영하는 것이 필수적임을 입증한다고 주장한다.

• 설계에 미치는 영향: 본 연구는 강성 접촉을 가정하는 것이 최적이 아니거나 안전하지 않은 설계를 초래할 수 있다고 단언한다. 입상 표면의 특정한 상호작용 역학(점성, 침입/압출력)은 최적의 보행과 에너지 요구량을 근본적으로 변화시킨다.
• 제어에 미치는 영향: 강성 가정만을 기반으로 훈련된 RL 정책은 달의 레골리스에 불충분하다. 연구는 공통된 보상 가중치를 사용하면 두 환경 모두에서 훈련을 안정화할 수 있지만, 결과로 나타나는 보행 방식은 확연히 다르다는 점을 강조한다.
• 미래 관련성: 저자들은 용암 동굴과 같이 접근하기 어려운 지형을 대상으로 하는 임무를 위해, 적절한 다리 형태, 모터 드라이브 및 제어 전략을 선택함에 있어 입상 기질에 대한 발-지면 상호작용을 이해하는 것이 필수적이라고 결론짓는다.

본 연구는 모든 sim-to-real 격차를 해결했다고 주장하는 것이 아니라, 입상 매질의 점성 특성을 무시할 경우 에너지 소비 및 보행 안정성에 대한 부정확한 예측이 발생하며, 이는 달 탐사 임무의 핵심 제약 조건임을 확립하는 데 목적이 있다.