Eye-tracking-Driven Shared Control for Robotic Arms: Wizard of Oz Studies to Assess Design Choices

논문 요약: 안구 추적 기반 공유 제어 (Shared Control) 를 활용한 로봇 팔 디자인 평가

1. 문제 정의 (Problem)

• 배경: 중증 운동 장애 (PSMD, Severe Motor Disabilities) 를 가진 사람들은 뇌 - 컴퓨터 인터페이스 (BCI), sip-and-puff 시스템, 안구 추적 인터페이스와 같은 손이 자유로운 (hands-free) 제어 방식을 필요로 합니다.
• 도전 과제:
  • 직접 제어의 한계: 2 차원 안구 움직임을 3 차원 로봇 공간으로 매핑하는 직접 제어 방식은 작업 부하가 크고 집중도가 높아야 하며, 모드 전환이 필요할 수 있습니다.
  • 공유 제어 (Shared Control) 의 필요성: 로봇이 작업 실행의 일부를 자동화하여 사용자의 부담을 줄이고 수용성을 높이는 공유 제어 방식이 제안되었으나, 적절한 자동화 수준과 사용자 의도 (Intent) 추정의 정확성, 그리고 '미다스의 접촉 (Midas Touch)' 문제 (의도치 않은 시선 고정으로 인한 오작동) 를 해결하는 디자인이 부족합니다.
  • 연구 격차: 기존 연구들은 대부분 비장애인을 대상으로 하거나 가상 환경에서 이루어졌으며, 실제 중증 장애인과 로봇의 상호작용에 대한 구체적인 디자인 피드백과 기술적 제약 조건 (Dwell time, 정확도 등) 에 대한 실증 데이터가 부족합니다.

2. 방법론 (Methodology)

이 연구는 마법사의 오즈 (Wizard of Oz, WoZ) 기법을 사용하여 안구 추적 기반 공유 제어 시스템을 설계하고 평가했습니다. WoZ 방식은 실제 로봇이 자동으로 작동하는 것처럼 보이게 하되, 실험자가 로봇의 행동을 제어하여 사용자의 기대와 반응을 빠르게 파악하는 방법입니다.

• 시스템 설계:

  • 입력: 안구 추적 (Eye-tracking). 사용자는 원하는 물체를 응시 (Fixation) 하여 선택합니다.
  • 제어 전략: 공유 제어 (Shared Control with Human Initiative). 사용자는 고수준 명령 (물체 선택 및 작업 의도) 을 내리고, 로봇은 경로 계획, 그리핑, 장애물 회피 등 저수준 작업을 자동화합니다.
  • 작업: 식사 (포크 사용), 음료 마시기 (컵 채우기), 조명 켜기, 물체 들어 올리기/배치하기 등 일상생활 활동 (ADL) 기반 5 가지 작업.
  • 하드웨어: Kinova Gen3 (7-DoF) 로봇 팔, Tobii Pro Glasses 3 (안구 추적 안경).

• 연구 설계 (두 단계의 연구):

  1. 온라인 설문 조사 (Study 1):
     • 대상: 중증 운동 장애인 (PSMD, 10 명), 가족/친구 (3 명), 의료 전문가 (6 명) 등 총 34 명.
     • 목적: 시스템의 일상적 유용성, 작업 우선순위, 접근성 및 사용자 만족도 평가.
     • 방식: WoZ 시스템의 작동 영상을 시청한 후 설문 응답.
  2. 실제 상호작용 연구 (Study 2, Hands-on):
     • 대상: 로봇 경험 유무에 따라 나눈 비장애인 24 명 (로봇 경험 그룹 13 명, 무경험 그룹 11 명).
     • 목적: 기술적 제약 조건 (Dwell time, 정확도) 도출 및 실제 상호작용에서의 사용자 경험 (UX) 평가.
     • 방식: 실험실 환경에서 WoZ 시스템을 직접 조작하며 안구 데이터 (Dwell time, AoI hit, Missed hit) 를 수집.

3. 주요 기여 (Key Contributions)

1. 초기 공유 제어 디자인 제시: 객체 감지 (Object Detection) 알고리즘을 활용한 일상 작업용 안구 추적 기반 공유 제어 디자인을 구체화했습니다.
2. 다양한 이해관계자 기반 평가: 잠재 사용자 (장애인), 가족, 의료 전문가, 그리고 로봇 경험 유무가 다른 비장애인을 포함한 포괄적인 피드백을 수집하여 시스템의 기능성과 사용성을 평가했습니다.
3. 디자인 개선 및 기술적 통찰 도출: 두 연구를 통해 얻은 인사이트를 바탕으로 초기 디자인의 개선점 (작업 우선순위, 기술적 제약, 피드백 전략) 을 제시했습니다.

4. 결과 (Results)

• 사용성 및 작업 우선순위 (Study 1):

  • 수용성: 대부분의 참가자 (17/34) 가 영상을 통해 시스템을 일상에서 사용할 수 있다고 응답했습니다.
  • 우선순위 작업: '식사/음료 섭취'가 가장 많이 요청되었으며, 이어 '환경 상호작용 (스위치, 문 등)', '물체 들어 올리기/배치', '개인 위생 (치약, 머리카락 등)' 순이었습니다.
  • 인사이트: 참가자들은 시스템의 작동 원리나 오작동 가능성에 대한 깊은 질문보다는 구체적인 작업 수행과 안전성에 더 관심을 가졌습니다.

• 기술적 성능 및 안구 행동 분석 (Study 2):

  • Dwell Time (응시 시간): 객체 선택 성공률을 높이기 위해 500ms 이상의 Dwell time 이 적절함을 확인했습니다. 500ms 미만으로 설정하면 의도치 않은 선택이 발생할 위험이 있습니다.
  • 오류 요인 분석:
    • 객체 크기와 모양: 작은 객체 (포크 손잡이 등) 나 얇은 객체는 안구 추적 오차로 인해 AoI (관심 영역) 를 벗어날 확률이 높았습니다.
    • 시선 위치: 시선이 화면 주변부로 갈수록 정확도가 떨어졌습니다. 특히 머리를 움직여 시선을 중앙으로 맞추는 행동이 Dwell time 에 영향을 미쳤습니다.
    • 의도 파악: 병뚜껑을 응시하는 등 작업 의도에 따른 특정 부분 고정 (Fixation) 이 관찰되어, 단순 객체 선택이 아닌 '작업 의도 (Task Intent)' 추정이 필요함을 시사했습니다.
  • 사용자 인식:
    • 비전문가 그룹: 시스템에 흥미를 느끼고 직관적이라고 평가했으나, 로봇의 속도나 컵 넘침에 대한 두려움을 표현했습니다.
    • 전문가 그룹: 로봇의 궤적 (Trajectory), 진동, 안전 장치 (비상 정지 버튼 위치) 등에 대해 비판적인 피드백을 제공했습니다.

5. 의의 및 결론 (Significance)

• 이중적 접근의 가치: 온라인 설문 (사용자 기대치 파악) 과 실제 실험 (기술적 제약 파악) 을 병행함으로써, 이론적 설계와 실제 구현 간의 격차를 줄이고 보다 현실적인 디자인 가이드라인을 제시했습니다.
• 디자인 개선 방향:
  • 다중 객체 선택: 단일 객체 선택의 모호성을 줄이기 위해 여러 객체를 조합하여 작업 의도를 파악하는 알고리즘 도입 필요.
  • 안전 및 피드백: 로봇의 속도 조절 기능, 작업 중단에 대한 명확한 피드백, 그리고 물리적 안전성 (충돌 회피) 강화가 필수적입니다.
  • 개인화: 사용자의 장애 정도와 환경에 따라 자동화 수준과 Dwell time 을 적응형으로 조절할 수 있는 시스템 개발 필요.
• 미래 전망: 이 연구는 중증 장애인을 위한 보조 로봇 팔의 개발에 있어, 기술적 타당성과 사용자 수용성을 동시에 고려한 '공유 제어'의 중요성을 입증했습니다. 특히 WoZ 기법을 통해 실제 프로토타입 제작 전 디자인 결함을 조기에 발견하고 개선할 수 있음을 보여주었습니다.

이 논문은 단순한 기술 구현을 넘어, 실제 사용자의 삶과 필요에 부응하는 보조 로봇 시스템을 설계하기 위한 인간 중심의 접근법 (Human-Centered Design) 의 중요성을 강조합니다.