Design and computational evaluation of an eye gaze wheelchair retrofit with temporal command supervision

심각한 신체 장애를 안고 살아가는 수백만 명의 사람들에게, 한 방에서 다른 방으로 이동하는 단순한 행위는 거대한 도전이 될 수 있습니다. 전동 휠체어는 독립적인 삶을 향한 길을 제시하지만, 이는 대개 손의 힘과 정교한 조작을 요구하는 조이스틱과 같은 제어 인터페이스에 의존합니다. 손을 사용할 수 없을 때, 눈은 강력하고도 아직 활용되지 않은 자원이 될 수 있습니다. 인간의 눈은 본래 정밀하며, 놀라운 속도로 물체를 포착할 수 있습니다. 따라서 사지를 움직일 수 없더라도, 특정 방향을 바라보는 것이 움직임을 위한 명령이 될 수 있습니다. 그러나 시선을 안전하고 신뢰할 수 있는 움직임으로 바꾸는 것은 단순히 점을 찍거나 클릭하는 것만큼 간단하지 않습니다. 눈은 세상을 끊임없이 스캔하며, 표지판을 읽거나 사람을 관찰하기 위해 초점을 옮깁니다. 사용자의 시선이 머무는 곳마다 휠체어가 움직이는 제어 시스템은 혼란스럽고 위험할 것입니다. 엔지니어들의 핵심 과제는 의도적인 움직임과 스쳐 지나가는 시선을 구별하는 것, 그리고 사용자의 정신과 기계 사이의 연결이 끊어졌을 때 휠체어가 위험한 경로로 계속 나아가는 대신 즉시 멈추도록 보장하는 것입니다.

쿠웨이트 과학기술대학교(Kuwait College of Science and Technology)의 연구진은 시선 추적 카메라와 휠체어의 기존 조이스틱 사이에 위치하는 장치를 통해, 표준 전동 휠체어를 완전히 시선으로 제어할 수 있게 해주는 리트로핏 키트인 'iMove'라는 시스템을 구축하고 테스트함으로써 이 문제를 해결했습니다. 하산 파야드-카잔(Hasan Fayyad-Kazan)이 이끄는 팀은 상용 시선 추적 카메라와 휠체어의 기존 조이스틱 사이에 위치하는 장치를 제작했습니다. 사용자가 스틱을 움직이는 대신, 태블릿 화면의 특정 방향을 바라보면 휠체어에 부착된 작은 로봇 팔이 물리적으로 조이스틱을 그 방향으로 밀게 됩니다. 이 시스템에는 중앙 "STOP" 타겟과 8개의 방향 타겟이 포함되어 있습니다. 사용자가 특정 방향을 바라보면, 시스템은 그 시선이 의도적인 명령인지 확인하기 위해 충분히 안정적인지 기다립니다. 시선이 충분히 오래 유지되면 로봇 팔이 조이스틱을 움직여 휠체어가 구르기 시작합니다. 만약 사용자가 시선을 돌리면, 시스템은 동작을 멈추도록 설계되었습니다.

연구진은 먼저 이 시스템이 시선을 움직임으로 변환할 수 있는지 확인하기 위해 기본 버전을 테스트했습니다. 예비 시험에서 그들은 열 번의 방향 선택을 시도했습니다. 시스템은 열 번 중 여덟 번 성공하여 80%의 성공률을 기록했습니다. 그러나 이 초기 테스트는 기본 설계의 결정적인 결함을 드러냈습니다. 시스템이 너무 '신뢰'한다는 점이었습니다. 사용자의 눈이 타겟에서 벗어나거나 컴퓨터가 보내는 신호가 멈추더라도, 기본 시스템은 조이스틱을 계속 밀고 휠체어를 계속 움직이게 했습니다. 입력이 유효하지 않게 되었을 때 스스로 멈추는 방법을 알지 못했던 것입니다. 이는 사용자가 통제력을 잃거나 집중력을 잃었을 때 휠체어가 계속 움직여 충돌로 이어질 수 있는 위험한 시나리오입니다.

이를 해결하기 위해 연구진은 명령의 안전 가드 역할을 하는 소프트웨어 로직 계층인 '템포럴 슈퍼바이저(temporal supervisor, 시간적 감독관)'를 개발했습니다. 이 감독관은 명령이 여전히 유효한지 확인하기 위한 일련의 규칙을 도입합니다. 첫째, '딜웰(dwell, 머무름)' 시간을 요구합니다. 즉, 사용자가 의도적인 명령임을 나타내기 위해 특정 시간(설계상 0.60초) 동안 타겟을 바라보아야 합니다. 이는 빠른 시선 이동으로 인한 우발적인 움직임을 방지합니다. 둘째, 입력이 '신선한(fresh)' 상태인지 확인하여, 시선 추적기에서 오는 신호가 방금 전의 멈춘 이미지가 아니라 새로운 신호인지 보장합니다. 셋째, 태블릿과 휠체어 사이의 연결을 모니터링합니다. 통신 링크가 끊어지면 시스템은 즉시 명령을 차단합니다.

연구진은 단순히 시스템을 구축하는 데 그치지 않고, 스트레스 상황에서 시스템이 어떻게 작동하는지 보기 위해 수천 개의 시나리오를 엄격하게 시뮬레이션했습니다. 그들은 시선 추적기를 멈추거나, 통신 케이블을 절단하거나, 컴퓨터의 처리를 중단시키는 등의 결함을 주입할 수 있는 디지털 환경을 만들었습니다. 이러한 시뮬레이션에서 기본 시스템은 결함이 발생할 때마다 실패하여, 테스트가 진행되는 내내 휠체어를 계속 움직이게 했습니다. 반면, 새로운 감독관 시스템은 빠르게 반응했습니다. 시선 추적기가 멈췄을 때, 감독관 시스템은 0.12초 이내에 명령을 중단했습니다. 통신 링크가 끊겼을 때, 시스템은 0.24초 이내에 명령을 중단했습니다. 또한 연구진은 사용자가 0.12초와 같이 아주 짧은 순간 실수로 타겟을 바라보았을 때 어떤 일이 일어나는지도 테스트했습니다. 기본 시스템은 휠체어를 작동시켰겠지만, 감독관 시스템은 시선이 너무 짧아 의도적인 명령이 아니라고 판단하여 이를 올바르게 무시했습니다.

연구는 또한 물리적인 정지의 현실을 살펴보았습니다. 소프트웨어가 즉각적으로 "정지" 명령을 보내더라도, 휠체어가 공중에서 갑자기 멈추는 것은 아닙니다. 휠체어에는 관성이 있습니다. 휠체어가 완전히 멈추는 데 걸리는 시간인 3~4초를 관찰하여, 연구진은 정지 명령이 내려진 후 휠체어가 얼마나 멀리 이동할지 계산했습니다. 속도가 초당 0.50미터일 때, 휠체어는 완전히 멈추기 전까지 0.78에서 1.13미터 사이를 이동합니다. 이 거리는 상당하며, 소프트웨어의 속도가 안전 방정식의 일부일 뿐, 물리적인 브레이킹 또한 똑같이 중요하다는 점을 강조합니다. 연구진은 시스템이 정지 명령을 내리는 데 너무 오래 걸리면 휠체어가 훨씬 더 멀리 이동한다는 것을 발견했으며, 이는 감독관 시스템이 제공하는 빠른 응답 시간의 필요성을 뒷받end합니다.

결과가 유망하기는 하지만, 연구진은 이 작업이 완성된 의료 제품이라기보다 개념 증명(proof of concept) 단계임을 주의 깊게 언급했습니다. 테스트는 실제 사용자 가 아닌 개발자들에 의해 수행되었으며, 80%의 성공률은 매우 적은 횟수의 시도를 바탕으로 한 것입니다. 이 연구는 논리가 컴퓨터 시뮬레이션에서 작동하며 하드웨어가 물리적으로 조이스틱을 움직일 수 있다는 것을 입증하지만, 실제 사용자가 복잡한 환경을 안전하게 탐색할 수 있다는 것까지는 아직 입증하지 못했습니다. 연구팀은 향-후 작업에서 실제 사용자를 대상으로 시스템이 장기간 및 실제 환경에서 어떻게 상호작용하는지 테스트해야 한다고 강조합니다. 또한 현재의 소프트웨어로는 감지할 수 없는 로봇 팔이 끼이는 것과 같은 기계적 고장에 대해서도 시스템이 견고해져야 한다고 언급했습니다.

궁극적으로 이 연구는 보조 기술의 중요한 원칙을 강조합니다. 즉, 안전이란 단순히 장치를 작동시키는 것이 아니라, 작동해야 할 때 확실히 멈추게 하는 것입니다. 의도적인 선택 방법과 오류를 감시하는 스마트한 안전 계층을 결합함으로써, 연구진은 눈을 통해 휠체어를 제어하는 더 안전한 방법을 위한 청사진을 만들었습니다. iMove 시스템은 적절한 타이밍 체크와 결함 감지의 조합을 통해, 인간 시선의 자연스럽고 유동적인 움직임을 기계를 위한 신뢰할 수 있고 안전한 명령으로 전환하는 것이 가능하다는 것을 보여줍니다. 이는 그것이 가장 필요한 사람들에게 의도와 행동 사이의 간극을 메워주는 과정입니다.