Design and Evaluation of a Touchscreen-Based Teleoperation Interface for Robotic Manipulators

Stellen Sie sich eine Welt vor, in der Roboter Ihre supermächtigen Helfer sind, die in der Lage sind, die schmutzigen, gefährlichen oder langweiligen Aufgaben zu erledigen, die Menschen einfach nicht machen sollten. Dies ist das Reich der Teleoperation, eines Zweigs der Robotik, bei dem ein Mensch sicher in der Ferne sitzt und einen Roboterarm an einem gefährlichen Ort, wie etwa in einem Kernkraftwerk oder einem Tiefsee-Wrack, „steuert“. Der schwierige Teil ist nicht nur zu sagen, wohin der Roboter gehen soll, sondern auch, wie stark er drücken soll. Stellen Sie sich das wie den Versuch vor, eine Wand zu streichen, während man dicke Boxhandschuhe trägt und durch ein winziges Schlüsselloch auf die Wand blickt. Man muss den Pinsel mit genau dem richtigen Druck gegen die Wand drücken, während man ihn gleichzeitig gleichmäßig bewegt. Wenn man zu fest drückt, beschädigt man die Wand; drückt man zu sanft, übergeht man eine Stelle. Seit Jahrzehnten ist das Standardwerkzeug für diese Aufgabe ein Joystick, die gleiche Art von Controller, die auch in Videospielen verwendet wird. Aber Joysticks können für feine Aufgaben ungeschickt sein, da man den Winkel eines Sticks mental in die Geschwindigkeit des Roboters übersetzen muss, was oft zu ruckartigen Bewegungen oder versehentlichen Kollisionen führt.

Stellen Sie sich nun ein anderes Werkzeug vor: einen riesigen, hochmodernen Touchscreen, wie den auf Ihrem Handy oder Tablet, aber anstatt auf Icons zu tippen, ziehen Sie Ihren Finger, um den Roboter zu bewegen. Dies ist die Idee, die in einer neuen Studie von Forschern untersucht wurde, die herausfinden wollten, ob diese „direkte Berührungsmethode“ die Robotersteuerung einfacher, schneller und weniger stressig für den menschlichen Operator machen könnte. Sie testeten dies gegen den altmodischen Joystick und einen vollautomatischen Modus, um zu sehen, welcher Methode die Menschen am besten die Arbeit ermöglichen konnte, ohne ihr Gehirn zu überlasten.

Das große Experiment: Finger gegen Stick gegen Robotergehirn

Die Forscher gestalteten ein hochkarätiges „Folge-dem-Leader“-Spiel über den Ozean hinweg. Die menschlichen Operatoren befanden sich in einem Labor in Bristol, UK, während der Roboter, den sie steuerten – ein Franka Emika Panda Arm, der mit einem Kraftsensor ausgestattet war – in einem Labor in Genua, Italien, saß. Die Mission? Eine kritische Wartungsaufgabe in der Kerntechnik zu simulieren: die Probenahme mittels Abwischen (Swab Sampling). Stellen Sie sich vor, Sie müssen eine bestimmte Fläche mit einem Tupfer abwischen, um nach Strahlung zu suchen. Sie müssen die gesamte Fläche gleichmäßig abdecken, einem spezifischen wellenförmigen (sinusförmigen) Pfad folgen und dabei die ganze Zeit einen stetigen, sanften Druck auf die Oberfläche ausüben.

Die 20 Teilnehmer versuchten, diese Aufgabe mit drei verschiedenen Methoden zu bewältigen:

1. Der Joystick (C1): Die traditionelle Methode, bei der die Bewegung des Sticks den Roboter bewegt.
2. Der Touchscreen (C2): Die neue Methode, bei der der Operator seinen Finger über einen Bildschirm zieht und die „Hand“ (der Endeffektor) des Roboters diesem Pfad des Fingers direkt folgt, während der Roboter automatisch den Druck regelt.
3. Der Ein-Klick-Autopilot (C3): Ein Referenzmodus, in dem der Roboter den gesamten Pfad automatisch mit einem einzigen Klick ausführt; dieser diente hier als Basislinie, um zu sehen, wie viel Arbeit die Menschen tatsächlich verrichteten.

Die Ergebnisse: Touch gewinnt, Joysticks stolpern

Die Erkenntnisse waren überraschend eindeutig. Die Touchscreen-Schnittstelle funktionierte nicht nur gut, sie vernichtete die Konkurrenz in Bezug auf Geschwindigkeit und Genauigkeit.

• Geschwindigkeit: Bei der Verwendung des Touchscreens schlossen die Teilnehmer die Aufgabe in einer Medianzeit von 2,50 Minuten ab. Die Joystick-Nutzer brauchten mit 5,38 Minuten deutlich länger. Das ist eine Reduktion der Zeit um 53,5 %! Die Touchscreen-Nutzer waren fast doppelt so schnell.
• Genauigkeit: Es ging nicht nur um die Geschwindigkeit, sondern auch um die Präzision. Auf dem kniffligen wellenförmigen Pfad deckten die Touchscreen-Nutzer 90,7 % der erforderlichen Fläche ab, während die Joystick-Nutzer nur 84,1 % erreichten.
• Das „Overshoot“-Problem: Joystick-Nutzer neigten dazu, über die Ziellinien hinauszuschießen (Overshoot), während die Touchscreen-Nutzer viel näher am Pfad blieben.

Warum war der Touchscreen so viel besser? Die Forscher fanden heraus, dass der Joystick die Nutzer dazu zwang, ständig gleichzeitig darüber nachzudenken: „Wie schnell sollte ich mich bewegen?“ und „Drücke ich stark genug?“. Es war, als würde man versuchen, ein Auto zu fahren und gleichzeitig eine Matheaufgabe zu lösen. Der Touchscreen hingegen wirkte wie eine natürliche Erweiterung der Hand. Man zieht seinen Finger, und der Roboter bewegt sich. Das Gehirn des Roboters (ein spezieller Controller) übernahm automatisch den schwierigen Teil: den perfekten Druck auf der Oberfläche zu halten. Dies ermöglichte es dem Menschen, sich voll und ganz darauf zu konzentzen, wohin er gehen muss, nicht wie stark er drücken muss.

Die kognitive Last: Weniger Stress, mehr Vertrauen

Die Studie untersuchte auch, was in den Köpfen der Operatoren vorging. Die kognitive Last (wie viel mentale Anstrengung erforderlich war) wurde mithilfe einer Standardumfrage namens NASA-TLX sowie durch die Verfolgung physischer Anzeichen wie Blinzeln, Hautschweiß (GSR) und Gesichtstemperatur gemessen.

• Mentale Anstrengung: Die Joystick-Nutzer hatten die höchste mentale Last mit einem Durchschnittswert von 52. Bei den Touchscreen-Nutzern sank dieser Wert auf 43 (eine Reduktion um 17,3 %). Der Ein-Klick-Autopilot war am einfachsten mit einem Wert von 31.
• Vertrauen: Interessanterweise berichteten die Joystick-Nutzer tatsächlich über ein etwas höheres Vertrauen in das System als die Touchscreen-Nutzer, obwohl sie schlechter abschnitten. Die Forscher vermuten, dass dies daran liegen könnte, dass die Menschen an Joysticks gewöhnt sind und sich durch das vertraute Werkzeug mehr „kontrolliert“ fühlten, während sich der Touchscreen anfangs neu und etwas unsicher anfühlte. Dennoch erwies sich der Touchscreen als das überlegene Werkzeug für die eigentliche Aufgabe.

Was dies bedeutet

Dieses Paper legt nahe, dass für empfindliche, kontaktintensive Aufgaben wie die Wartung in Kernanlagen der altmodische Joystick uns behindern könnte. Die Touchscreen-Schnittstelle bietet einen intuitiveren, „natürlicheren“ Weg, um mit einem Roboter zu kommunizieren, und verwandelt eine komplexe, stressige Aufgabe in etwas, das sich eher wie das Zeichnen auf einem Tablet anfühlt. Während der vollautomatische Modus die geringste Belastung darstellte, nimmt er den Menschen aus der Entscheidungsschleife heraus, was in unvorhersehbaren Umgebungen nicht immer sicher oder praktikabel ist. Der Touchscreen stellt ein perfektes Gleichgewicht dar: Er hält den Menschen in der Kontrolle, gibt ihm aber ein Werkzeug an die Hand, das die schwere Arbeit der Druckregelung automatisch erledigt.

Kurz gesagt: Wenn Sie möchten, dass ein Roboter eine radioaktive Unordnung beseitigt, ohne selbst eine Unordnung zu verursachen, geben Sie dem Operator keinen Joystick. Geben Sie ihm einen Touchscreen und lassen Sie seine Finger sprechen.