Simulating Infant First-Person Sensorimotor Experience via Motion Retargeting from Babies to Humanoids
Dieser Beitrag stellt ein Framework vor, das aus einzelnen Videos 3D-Posen von Säuglingen rekonstruiert und sie auf physische und virtuelle humanoide Plattformen überträgt, um reichhaltige multimodale sensorimotorische Erfahrungen zu simulieren, wodurch neue Werkzeuge für die Entwicklungspsychologie, die Robotik und die Früherkennung neuroentwicklungsbedingter Störungen bereitgestellt werden.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung eines Preprints, das nicht peer-reviewed wurde. Dies ist kein medizinischer Rat. Treffen Sie keine Gesundheitsentscheidungen auf Grundlage dieses Inhalts. Vollständigen Haftungsausschluss lesen
Stellen Sie sich vor, Sie haben ein Heimvideo von einem Baby, das sich windet, tritt und an seinen eigenen Zehen zupft. Normalerweise können Sie dies nur von außen beobachten, wie ein Zuschauer im Theater. Aber was wäre, wenn Sie sich magisch verkleinern, in den Körper des Babys steigen und genau das spüren könnten, was es fühlt? Was wäre, wenn Sie die Welt durch seine Augen sehen, den Druck seiner Hand auf seinem Knie spüren und das schwindelerregende Drehen beim Umdrehen empfinden könnten?
Dieser Artikel beschreibt eine „Zeitmaschine" für die Sinne, die genau das leistet. Die Forscher entwickelten ein System, das ein einfaches Video eines Babys aufnimmt und verwendet, um einen Roboter (oder eine Computersimulation eines Babys) dazu zu bringen, sich exakt genauso zu bewegen. Sobald sich der Roboter wie das Baby bewegt, zeichnet er alle seine eigenen internen Sensoren auf und ermöglicht es uns effektiv, die Erfahrung des Babys zu „leben".
So funktioniert die Magie, aufgeschlüsselt in einfache Schritte:
1. Der „Geist in der Maschine" (Bewegungsübertragung)
Stellen Sie sich das Baby im Video als Tänzer und den Roboter als Marionette vor. Die Forscher entwickelten eine Methode, um den Tänzer zu beobachten und die Marionette sofort jeden Zug nachahmen zu lassen.
- Der Prozess: Sie nehmen ein Video eines Babys auf und nutzen Computervision, um das „Skelett" des Babys zu finden (wo sich Ellbogen, Knie und Hüften befinden).
- Die Übertragung: Anschließend übertragen sie diese Bewegungen auf verschiedene „Körper". Sie testeten dies an drei verschiedenen Arten von digitalen und physischen Baby-Robotern:
- iCub: Ein echter Roboter, der wie ein vierjähriges Kind aussieht (und eine Computer-Version davon).
- EMFANT: Ein hochdetailliertes Computermodell, das Muskeln und Knochen enthält und so gestaltet ist, dass es exakt der Anatomie eines echten Babys entspricht.
- MIMo: Ein einfacheres, blockartiges Computermodell, das so skaliert werden kann, dass es der exakten Körpergröße und Gliedmaßenlänge des Babys perfekt entspricht.
2. Den „Sensorischen Anzug" des Babys anziehen
Sobald sich der Roboter wie das Baby bewegt, schaltet das System alle internen Sensoren des Roboters ein, um aufzuzeichnen, was das Baby gefühlt hätte. Dies erzeugt einen „sensorischen Anzug", den die Forscher virtuell tragen können.
- Sehen (Die Augen): Der Roboter hat Kameras in seinen Augen. Durch das Abspielen der Bewegungen des Babys zeigt das System genau, was das Baby sah. Wenn ein Baby beispielsweise auf seine eigene Hand schaut, zeigt der Roboter uns, wie die Hand das gesamte Sichtfeld ausfüllt, und sogar, wie die beiden Augen leicht unterschiedliche Winkel sehen (stereoskopisches Sehen), was dem Baby hilft, die Tiefe zu verstehen.
- Tastsinn (Die Haut): Die Roboter haben eine „Haut", die mit Tausenden winziger Drucksensoren bedeckt ist. Wenn die Hand des Babys im Video seinen eigenen Bauch berührt, leuchten die Sensoren des Roboters auf. Die Forscher stellten fest, dass das Baby die meiste Zeit hauptsächlich seine Hände, den Rumpf und die Beine berührt, wodurch eine spezifische Karte des „Selbstberührens" entsteht.
- Propriozeption (Die Körperkarte): Dies ist das Gefühl, zu wissen, wo sich Ihre Gliedmaßen befinden, ohne hinzusehen. Das System zeichnet die Winkel der Gelenke des Roboters auf und simuliert im fortschrittlichsten Modell (EMFANT) sogar das Dehnen der Muskeln. Dies verrät uns, wie das Baby die Form seines eigenen Körpers „spürt".
- Vestibulärsystem (Das Innenohr): Der Roboter verfügt über einen eingebauten Gleichgewichtssensor (wie ein Innenohr). Wenn sich das Baby im Video umdreht, zeichnet der Roboter den Rausch der Beschleunigung und des Drehens auf und zeigt uns das schwindelerregende Gefühl der Bewegung.
3. Warum dies eine große Sache ist
Die Forscher testeten, wie gut die Roboter das Baby kopierten.
- Die Ergebnisse: Der einfachere, anpassbare Roboter (MIMo) war am genauesten und kopierte die Bewegungen des Babys mit einem Fehler von weniger als einem halben Zentimeter. Selbst der echte Roboter (iCub) leistete gute Arbeit, obwohl er etwas weniger präzise war, da er größer und steifer ist als ein echtes Baby.
- Die „gemeinsame Sprache": Obwohl die Roboter unterschiedlich gebaut sind (einer ist real, einer ist muskelbetont, einer ist blockartig), stellten die Forscher fest, dass ihre sensorischen Erfahrungen überraschend ähnlich waren. Es ist wie bei drei verschiedenen Personen, die denselben Sonnenuntergang beschreiben; sie verwenden unterschiedliche Worte, sind sich aber alle über die Farben und das Gefühl einig. Dies beweist, dass das System das Wesentliche der Erfahrung des Babys erfasst und nicht nur die spezifischen Eigenheiten des Roboters.
4. Eine neue Art, Babys zu beobachten
Der Artikel zeigt eine praktische Anwendung dafür: Automatisierte Notiznahme.
Normalerweise muss, wenn ein Wissenschaftler wissen möchte, wie oft ein Baby seinen eigenen Körper berührt, ein Mensch stundenlang Videos ansehen und jede Berührung manuell zählen. Das ist langsam und ermüdend.
- Die Lösung: Da der Roboter die Berührung, wenn sie stattfindet, „spürt", kann der Computer sie automatisch zählen. Die Forscher testeten dies und stellten fest, dass die Zählung des Roboters der Zählung menschlicher Experten sehr nahe kam. Es ist wie ein unermüdlicher Assistent, der keine einzige Berührung verpasst.
Zusammenfassung
Kurz gesagt, stellt dieser Artikel ein Werkzeug vor, das ein passives Video eines Babys in eine aktive, Ich-Perspektive-Simulation verwandelt. Es ermöglicht Wissenschaftlern, in die Haut des Babys zu steigen, durch seine Augen zu sehen und seine Bewegungen zu spüren. Dies hilft uns zu verstehen, wie Babys ihren eigenen Körper und die Welt lernen, und bietet eine neue, automatisierte Möglichkeit, entwicklungsbedingtes Verhalten zu untersuchen, ohne invasive Kameras an echte Säuglinge anzubringen.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.