Mixed Reality Tele-Ultrasound over 750 km: A Feasibility Study
Diese Machbarkeitsstudie zeigt, dass ein Tele-Ultraschallsystem mit gemischter Realität, bei dem Remote-Experten Novizen über 754 km hinweg mittels haptischem Feedback anleiten, erfolgreich eine qualitativ hochwertige abdominale Ultraschallbildgebung mit positiver Benutzerfreundlichkeit und geringer Aufgabenbelastung ermöglicht.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Stellen Sie sich eine Welt vor, in der ein Arzt in einer Großstadt „hineingreifen" und eine Ultraschalluntersuchung an einem Patienten durchführen kann, der hunderte Meilen entfernt in einem abgelegenen Dorf lebt, ohne dass ein Roboter oder ein Spezialist dorthin reisen muss. Genau das wird in dieser Studie getestet.
Hier ist die Geschichte ihres Experiments, in einfachen Worten aufgeschlüsselt:
Das Problem: Die „medizinische Wüste"
In vielen abgelegenen Orten, wie der kleinen Inselgemeinde Skidegate in Kanada, gibt es keine Ultraschall-Experten. Wenn jemand eine Untersuchung benötigt, muss er entweder warten, bis ein Spezialist einmal im Monat vorbeikommt, oder eine achtstündige Fährfahrt in eine Großstadt antreten. Wird die Fähre abgesagt, verzögert sich die Diagnose.
Die Lösung: „Menschliche Teleoperation" (Der Marionettenspieler und die Marionette)
Anstatt einen komplexen, teuren Roboter zu bauen, der den Ultraschallkopf hält, versuchten die Forscher etwas anderes. Sie nutzten Mixed Reality (MR), um eine gewöhnliche Person (ein „Anfänger") in einen „kognitiven Roboter" zu verwandeln.
- Der Experte (Der Marionettenspieler): Ein erfahrener Ultraschall-Sonograf sitzt in Vancouver, 754 km entfernt. Er trägt einen speziellen Controller, der sich anfühlt, als würde er einen echten Ultraschallkopf halten.
- Der Anfänger (Die Marionette): Eine gewöhnliche Person im abgelegenen Dorf trägt ein holografisches Headset (Microsoft HoloLens 2). Sie hält einen echten Ultraschallkopf auf den Bauch des Patienten.
- Die Magie: Der Experte sieht einen Video-Feed aus den Augen des Anfängers sowie die Ultraschallbilder. Der Experte bewegt seinen Controller, und eine geisterhafte, holografische Version des Kopfes erscheint im Headset des Anfängers. Die Aufgabe des Anfängers besteht lediglich darin, seinen echten Kopf so zu bewegen, dass er mit dem geisterhaften Kopf übereinstimmt.
Stellen Sie es sich wie ein Spiel „Fang mich, wenn du kannst" vor, bei dem der Anführer Ihre Hände von einer anderen Stadt aus steuert und Sie ein Headset tragen, das Ihnen genau zeigt, wohin Sie gehen müssen.
Der Trick mit der „virtuellen Haut"
Einer der schwierigsten Aspekte beim Ultraschall ist zu wissen, wie stark man drücken muss. Drückt man zu fest, tut es weh; zu sanft, und das Bild wird unscharf.
- Die Herausforderung: Da die Internetverbindung eine leichte Verzögerung (Latenz) aufweist, ist es schwierig, ein „aua"-Signal sofort zurück zum Experten zu senden.
- Die Lösung: Das System erstellt ein einfaches, unsichtbares eiförmiges Modell (ein Ellipsoid) des Bauches des Patienten. Es ist wie das Zeichnen einer virtuellen Umrissskizze des Magens des Patienten. Wenn der Experte seinen virtuellen Kopf in diese Eiform bewegt, berechnet das System den Druck und gibt dem Experten einen „Schub" durch seinen Controller zurück. Es ist eine vereinfachte Karte, die dem Experten hilft, die Form des Patienten zu spüren, ohne dass ein perfekter 3D-Scan jedes einzelnen Buckels erforderlich ist.
Der große Test
Das Team setzte dieses System auf die Probe:
- Die Distanz: 754 km (etwa 470 Meilen) zwischen Vancouver und Skidegate.
- Das Team: 10 gewöhnliche Personen (Anfänger) und 2 erfahrene Sonografen.
- Die Mission: Die Experten führten die Anfänger an, um 5 spezifische Arten von Bildern des Abdomens aufzunehmen (Betrachtung der Leber, der Aorta und der Venen).
- Das Ergebnis: Insgesamt wurden 55 Bilder aufgenommen.
Was sie herausfanden
- Die Bilder waren hervorragend: 92 % der Bilder waren klar genug, damit Radiologen (Bildärzte) sie lesen und eine Diagnose stellen konnten. Obwohl die Personen, die die Köpfe hielten, dies noch nie zuvor getan hatten, führten die Experten sie perfekt.
- Es war leicht zu erlernen: Die Anfänger sagten, das System sei einfach zu bedienen. Sie hatten das Gefühl, es schnell lernen zu können. Die „mentale Belastung" (wie gestresst sie sich fühlten) war gering.
- Genauigkeit war nicht so wichtig, wie man denken würde: Die Forscher maßen, wie perfekt die Anfänger den geisterhaften Kopf nachahmten. Überraschenderweise war die Bildqualität auch dann noch hervorragend, wenn die Anfänger etwas daneben lagen (nicht perfekt ausgerichtet).
- Warum? Der erfahrene Sonograf konnte das tatsächliche Ultraschallbild sehen und seine Anleitung in Echtzeit anpassen. Es ist wie ein Fahrlehrer, der Ihnen sagt: „Etwas mehr nach links lenken", selbst wenn Sie das Lenkrad nicht perfekt gerade halten. Die relative Präzision war wichtiger als eine perfekte Genauigkeit.
- Der „Geist" funktionierte: Das eiförmige Modell zum Spüren des Drucks funktionierte gut genug, um dem Experten ein Gefühl für den Körper des Patienten zu vermitteln, selbst bei Internetverzögerungen.
Das Fazit
Die Studie beweist, dass man keinen millionenteuren Roboter benötigt, um Ultraschall in abgelegene Gebiete zu bringen. Man braucht nur eine gewöhnliche Person, ein holografisches Headset und einen Experten, der sie aus der Ferne anleitet. Es verwandelt einen Nicht-Experten in ein fähiges Paar Hände für einen entfernten Arzt und schließt die Lücke zwischen einer kleinen Insel und einer Großstadt.
Die Forscher stellten fest, dass das System zwar gut funktionierte, sie jedoch die Software verbessern müssen, die es dem Experten ermöglicht, die Einstellungen des Ultraschallgeräts (wie Zoomen oder Messen) einfacher zu steuern, und dass sie dies in Zukunft auch an anderen Körperteilen testen möchten. Doch vorläufig haben sie gezeigt, dass diese „menschliche Teleoperation" ein gangbarer Weg ist, um medizinische Versorgung an die am stärksten isolierten Orte zu bringen.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.