RoboTales: ROBOTic Anthropomorphic LEarning Systems

기술 요약: RoboTales – 로봇 인간형 학습 시스템 (ROBOTic Anthropomorphic LEarning Systems)

문제 제기
사회적 보조 로봇(SARs)은 교육 분야에서 점점 더 많이 활용되고 있으나, 이들은 종종 감정적 뉘앙스, 캐릭터 정체성 또는 복잡한 서사 구조를 전달하는 데 어려움을 겪는 음성, 시선 또는 경직된 제스처 라이브러리에 의존합니다. 인형극(Puppetry)은 주의 집중, 정서적 참여 및 기억 회상을 향상시키는 데 효과적임이 역사적으로 입증되었으나, 기존의 로봇 스토리텔링 시스템은 일반적으로 화면 기반의 아바타에 의존하거나 인간의 감독을 필요로 합니다. 특수한 액추에이션이나 인간의 관리 없이도, 저비용의 접근 가능한 하드웨어를 활용하여 캐릭터 중심의 서사를 구현하는 자율적인 물리적 체화(embodied) 로봇 스토리텔링에 관한 문헌적 공백이 존재합니다.

방법론
저자들은 내레이션, 제스처 및 물리적 인형 관절 움직임을 동기화하여 자율적인 스토리텔링을 수행하는 모듈형, 플랫폼 불가지론적(platform-agnostic) 시스템인 RoboTales를 제안합니다.

• 하드웨어 설계: 시스템은 맞춤 제작된 3D 프린팅 방식의 2자유도(2-DoF) 양말 인형 엔드 이펙터(end-effector)를 사용합니다. 이는 목 관절 움직임(nodding)을 위한 MX-64와 입 관절 움직임(mouth articulation)을 위한 MX-28, 두 개의 다이내믹셀 서보모터에 의해 구동됩니다. 이 설계는 저비용, 제작 용이성 및 모듈성을 우선시하며, 이를 통해 다양한 단일 또는 양팔 로봇에 엔드 이펙터를 장착할 수 있습니다. 두 가지 뚜렷한 캐릭터인 "Barneby"(장난스럽고 호기심 많은)와 "Fitzwilliam"(신중하고 조직적인)이 생성되었으며, 단순한 동작을 통해 명확한 인간형 단서를 제공하도록 설계되었습니다.
• 소프트웨어 파이프라인: 소프트웨어는 세 가지 양상(modality)을 조정합니다:
  1. 오디오 기반 구동: 내레이션은 데드밴드(deadband)와 지수 이동 평균(EMA) 필터가 적용된 제곱 평균 제곱근(RMS) 윈도우를 통해 처리됩니다. 이 신호는 음성 인식 없이도 진폭을 사전 보정된 입 각도에 매핑하여 입 서보를 구동합니다.
  2. 제스처 생성: 팔의 궤적은 확률적 운동 프리미티브(ProMPs)를 사용하여 생성됩니다. 이를 통해 고정된 사전 기록 경로가 아닌, 캐릭터의 성격(예: 에너지 넘치는 움직임 대 절제된 움직임)을 반영하면서 서사의 흐름에 맞춘 다양하고 부드러운 제스처를 생성할 수 있습니다.
  3. 동기화: 시스템은 입 움직임, 팔 제스처, 오디오가 동시에 전개되도록 보장합니다.
• 실험적 검증: 10명의 성인 참가자를 대상으로 소규모 피험자 간 파일럿 연구가 수행되었습니다. 참가자들은 무작위로 다음 두 가지 조건 중 하나에 배정되었습니다:
  1. 인형 모드(Puppet Mode): Baxter 로봇이 양말 인형을 사용하여 이야기를 수행함.
  2. 제스처 전용 모드(Gesture-Only Mode): Baxter가 양말 인형 없이 팔 제스처와 화면상의 비지음(viseme) 기반 입 모양만을 사용하여 이야기를 수행함.
     이야기 종료 후, 참가자들은 인간-로봇 상호작용 평가 척도(HRIES)와 가중치가 적용된 이야기 회상 설문지를 작성했습니다. 또한, 본 시스템의 모듈성을 검증하기 위해 하드웨어와 소프트웨어를 최소한의 수정만으로 ABB IRB 120 로봇 암에 이식하였습니다.

주요 기여

1. 재사용 가능한 설계 패턴: 본 논문은 저비용 양말 인형 구동과 자율적 제스처 생성 및 동기화된 내레이션을 통합하는, 체화된 로봇 스토리텔링을 위한 모듈형 프레임워크를 기여합니다.
2. 플랫폼 불가지론: 본 시스템은 최소한의 하드웨어 적응만으로 두 가지 서로 다른 로봇 플랫폼(Baxter 및 ABB IRB 120)에서 성공적인 배포를 보여줌으로써 확장성을 입증했습니다.
3. 자율적 캐릭터 체화: 시스템은 인간의 개입이나 복잡한 휴머노이드 하드웨어 없이도, 캐릭터의 정체성과 감정을 전달하기 위해 물리적 인형을 제어하는 완전한 자율적 스토리텔링을 달성합니다.

결과
파일럿 연구는 시스템의 효능을 뒷받침하는 예비 결과를 도출하였으나, 저자들은 본 연구가 통계적 추론을 위해 설계된 것은 아니라고 명시했습니다:

• 참여도 및 이해도: 인형 조건의 참가자들은 제스처 전용 조건에 비해 HRIES 정서적 및 사회적 지각 평가에서 더 우호적인 결과를 보고하였으며, 더 높은 이야기 회상 점수를 달성했습니다.
• 자율성: 시스템은 내레이션, 제스처 및 인형 관절 움직임을 안정적으로 동기화하며 운영자의 개입 없이 완전한 이야기를 성공적으로 전달했습니다.
• 모듈성: Baxter 로봇에서 ABB IRB 120으로의 전환은 미세한 어댑터 수정과 RAPID 환경을 위한 CSV 파서만을 필요로 했으며, 이는 시스템의 적응성을 확인시켜 주었습니다 (성공 기준 S3).

의의 및 주장
본 논문은 RoboTales가 수동적 미디어에 대한 스크린 없는 저비용 대안을 제공함으로써 로봇의 체화와 서사 표현 사이의 단절을 해결한다고 주장합니다. 저자들은 체화된 인형극이 제스처 전용 모드보다 정서적 참여와 서사 이해를 더 효과적으로 향상시킨다고 가정합니다.

본 연구의 의의는 교육 환경에서 인간의 의도를 확장할 수 있는 잠재력에 있습니다. 자동화된 인형 기반 스토리텔링을 통해, 본 시스템은 인력의 시간이 제한적인 학교, 도서관, 커뮤니티 센터에서의 문해력 및 창의적 놀이를 지원하는 것을 목표로 합니다. 저자들은 이 시스템이 교육자를 대체하기보다는 그들의 범위를 확장하기 위해 설계되었음을 강조하며, 이를 통해 아동 중심 학습 환경에 로봇 스토리텔링을 도입하는 진입 장벽을 낮추고자 합니다. 향-후 과제로는 아동 참가자를 포함한 시스템 확장, 전통적인 인형극에 기반한 동작 품질의 정교화, 그리고 입 타이밍 정렬의 개선 등이 제시되었습니다.