Design and Evaluation of a Touchscreen-Based Teleoperation Interface for Robotic Manipulators

로봇이 인간의 강력한 조력자가 되어, 인간이 직접 하기에는 너무 더럽거나 위험하거나 지루한 일들을 대신 해주는 세상을 상상해 보십시오. 이것은 인간이 원자력 발전소나 심해 난파선처럼 위험한 장소에 멀리 떨어져 앉아 로봇 팔을 "운전"하는 로봇 공학의 한 분야인 **원격 제어(teleoperation)**의 영역입니다. 까다로운 점은 단순히 로봇에게 어디로 갈지를 알려주는 것뿐만 아니라, 얼마나 세게 밀어야 하는지를 알려주는 것입니다. 마치 두꺼운 권투 글러브를 끼고 아주 작은 구멍을 통해 벽을 바라보며 벽을 칠하려고 노력하는 것과 같습니다. 브러시를 벽에 적절한 압력으로 누르면서도 부드럽게 움직여야 합니다. 너무 세게 누르면 벽이 손상되고, 너무 약하게 누르면 빈 곳이 생깁니다. 수십 년 동안 이 작업의 표준 도구는 비디오 게임에서 사용하는 것과 같은 종류의 조이스틱이었습니다. 하지만 조이스틱은 사용자가 스틱의 각도를 로봇의 속도로 정신적으로 변환해야 하기 때문에, 섬세한 작업에는 투박할 수 있으며 종종 덜컥거리는 움직임이나 의도치 않은 충돌을 유발합니다.

이제 다른 도구를 상상해 보십시오. 스마트폰이나 태블릿처럼 거대하고 첨단 기술이 집약된 터치스크린입니다. 다만 아이콘을 탭하는 대신, 손가락을 드래그하여 로봇을 움직이는 방식입니다. 이것이 바로 연구진들이 "직접 터치" 방식이 로봇 제어를 더 쉽고, 빠르고, 스트레스 없이 만들 수 있는지 확인하기 위해 탐구한 아이디어입니다. 그들은 이 방식이 기존의 조이스틱 및 완전 자동 모드와 비교했을 때, 인간 운영자가 뇌의 과부하 없이 작업을 가장 잘 수행할 수 있는지 테스트했습니다.

거대한 실험: 손가락 vs 스틱 vs 로봇의 뇌

연구진은 바다 너머로 "따라가기"라는 고도의 긴장감을 요하는 게임을 설정했습니다. 인간 운영자들은 영국 브리스톨의 실험실에 있었고, 그들이 제어하는 로봇(힘 센서가 장착된 Franka Emika Panda 암)은 이탈리아 제노바의 실험실에 있었습니다. 임무는 무엇이었을까요? 바로 핵심적인 원자력 유지보수 작업인 **스왑 샘플링(swab sampling)**을 시뮬레이션하는 것이었습니다. 특정 표면을 스왑(면봉 형태의 도구)으로 닦아 방사능을 확인하는 장면을 상상해 보십시오. 전체 영역을 고르게 덮어야 하며, 특정한 물결 모양(사인파) 경로를 따라가야 하고, 그동안 표면에 일정하고 부드러운 압력을 유지해야 합니다.

20명의 참가자는 다음 세 가지 방법 중 하나를 사용하여 이 작업을 완료했습니다:

1. 조이스틱 (C1): 스틱을 움직이면 로봇이 움직이는 전통적인 방식입니다.
2. 터치스크린 (C2): 새로운 방식으로, 운영자가 화면에서 손가락을 드래그하면 로봇의 "손"(말단 장치)이 그 손가락의 경로를 직접 따라가며, 로봇이 압력을 자동으로 조절합니다.
3. 원클릭 오토파일럿 (C3): 단 한 번의 클릭으로 로봇이 전체 경로를 자동으로 수행하는 참조 모드로, 인간이 실제로 얼마나 많은 일을 하고 있는지를 확인하기 위한 기준점으로 사용되었습니다.

결과: 터치의 승리, 조이스틱의 실수

결과는 놀라울 정도로 명확했습니다. 터치스크린 인터페이스는 단순히 작동하는 수준을 넘어, 속도와 정확도 면에서 경쟁자들을 압도했습니다.

• 속도: 터치스크린을 사용했을 때 참가자들은 중앙값 2.50분 만에 작업을 마쳤습니다. 조이스틱 사용자들은 훨씬 더 긴 5.38분이 걸렸습니다. 이는 53.5%의 시간 단축입니다! 터치스크린 사용자는 거의 두 배나 빨랐습니다.
• 정확도: 속도뿐만 아니라 정밀함도 중요했습니다. 까다로운 물결 경로에서 터치스크린 사용자는 요구되는 면적의 **90.7%**를 커버한 반면, 조이스키스 사용자는 **84.1%**만을 달성했습니다.
• "오버슈트(Overshoot)" 문제: 조이스틱 사용자들은 목표선을 지나쳐 버리는 경향이 있었던 반면, 터치스크린 사용자는 경로에 훨씬 가깝게 머물렀습니다.

왜 터치스크린이 훨씬 더 좋았을까요? 연구진은 조이스틱이 사용자에게 "얼마나 빨리 움직여야 하는가?"와 "충분히 세게 누르고 있는가?"를 동시에 끊임없이 생각하게 만든다는 것을 발견했습니다. 그것은 마치 자동차를 운전하면서 동시에 수학 문제를 푸는 것과 같았습니다. 그러나 터치스크린은 마치 손의 자연스러운 연장선처럼 작동했습니다. 손가락을 드래그하면 로봇이 움직입니다. 로봇의 뇌(특수 컨트롤러)가 어려운 부분인 표면에 완벽한 압력을 유지하는 일을 자동으로 처리했습니다. 이를 통해 인간은 "어떻게 밀 것인가"가 아니라 "어디로 갈 것인가"에 온전히 집중할 수 있었습니다.

뇌 부하: 적은 스트레스, 높은 신뢰

연구진은 또한 운영자의 머릿속에서 어떤 일이 일어나고 있는지 살펴보았습니다. 그들은 NASA-TLX라는 표준 설문지와 깜빡임, 피부 땀(GSR), 얼굴 온도와 같은 물리적 징후를 추적하여 인지 부하(정신적 노력이 얼마나 필요한지)를 측정했습니다.

• 정신적 노력: 조이스틱 사용자는 평균 점수 52로 가장 높은 정신적 부하를 보였습니다. 터치스크린 사용자는 43으로 떨어졌습니다 (17.3% 감소). 원클릭 오토파일럿은 가장 쉬웠으며, 점수는 31이었습니다.
• 신뢰도: 흥-미롭게도, 조이스틱 사용자들은 실제 수행 능력은 더 낮았음에도 불구하고 시스템에 대해 터치스크린 사용자보다 약간 더 높은 신뢰도를 보고했습니다. 연구진은 사람들이 조이스틱에 익숙하여 친숙한 도구에 대해 더 "통제권을 갖고 있다"고 느꼈던 반면, 터치스크린은 새롭고 다소 불확실하게 느껴졌기 때문일 수 있다고 설명합니다. 그러나 실제 작업 측면에서는 터치스크린이 더 우수한 도구임이 증명되었습니다.

이것이 의미하는 바

이 논문은 원자력 유지보수와 같이 섬세하고 접촉이 많은 작업의 경우, 구식 조이스틱이 우리의 발목을 잡고 있을 수 있음을 시사합니다. 터치스크린 인터페이스는 로봇과 대화하는 더 직관적이고 "자연스러운" 방법을 제공하며, 복잡하고 스트레스가 높은 작업을 마치 태블릿에 그림을 그리는 것처럼 느끼게 해줍니다. 완전 자동 모드가 스트레스는 가장 적었지만, 이는 예측 불가능한 환경에서 항상 안전하거나 실용적인 것은 아닙니다(인간을 의사 결정 과정에서 제외시키기 때문입니다). 터치스크린은 완벽한 균형을 이룹니다. 인간이 주도권을 유지하게 하면서도, 압력 제어라는 힘든 일을 자동으로 수행할 수 있는 도구를 제공합니다.

요약하자면, 로봇이 스스로 사고를 치지 않고 방사능 오염을 청소하기를 원한다면, 운영자에게 조이스크를 주지 마십시오. 터치스크린을 주고, 그들의 손가락이 말하게 하십시오.