CARLAverse: A Highly Modular, Distributed, and Multimodal Framework for Human-in-the-Loop Simulation
CARLAverse ist ein quelloffenes, verteiltes und multimodales Simulationsframework, das Fahr-, Radfahr- und Fußgängernumgebungen integriert, um skalierbare Human-in-the-Loop-Experimente zu ermöglichen, indem es durch eine neuartige Local-Client/Central-Server-Architektur die latenzkritische haptische Rückkopplung von Netzwerkengpässen entkoppelt.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Um Autos zu bauen, die von selbst sicher fahren können, müssen Ingenieure sie lehren, in einer Welt voller unvorhersehbarer Menschen zu navigieren. Während Computer exzellent darin sind, strengen Regeln zu folgen, haben sie oft Schwierigkeiten mit den subtilen, unausgesprochenen Verhandlungen, die auf einer belebten Straße stattfinden: ein Radfahrer, der über seine Schulter blickt, bevor er abbiegt, ein Fußgänger, der an einem Zebrastreifen zögert, oder ein Autofahrer, der einen Spurwechsel signalisiert. Um diese komplexen Interaktionen zu untersuchen, ohne echte Leben zu gefährden, nutzen Forscher Simulatoren. Diese digitalen Umgebungen ermöglichen es Menschen, Fahrszenarien nachzuspielen, während Computer deren Reaktionen aufzeichnen. Dennoch bleibt eine große Hürde bestehen: Die meisten aktuellen Simulatoren sind isolierte Inseln. Sie können einem menschlichen Fahrer zwar eine virtuelle Welt zeigen, aber sie haben Schwierigkeiten, diesen Fahrer mit anderen echten Menschen zu verbinden, die als Radfahrer oder Fußgänger im selben geteilten Raum agieren. Wenn mehrere Menschen versuchen, in einer virtuellen Welt über ein Netzwerk miteinander zu interagieren, kann die Verzögerung beim Senden von Informationen die Illusion zerstören, was das Erlebnis träge wirken lässt oder körperliches Unbehagen verursacht.
Ein Forschungsteam der Hochschule für angewandte Wissenschaften Karlsruhe hat dieses Problem gelöst, indem es ein neues, offenes System namens CARLAverse geschaffen hat. Dieses Framework fungiert als Brücke und ermöglicht es verschiedenen Arten von Simulatoren – etwa für Autos, Fahrräder und Fußgänger – sich in einer einzigen, synchronisierten virtuellen Stadt zu verbinden und miteinander zu interagieren. Die zentrale Innovation liegt darin, wie das System die Physik der Bewegung handhabt. Anstatt jede winzige Nuance des Lenkens oder Tretens einer Person an einen zentralen Computer zu senden und auf eine Antwort zu warten, teilt das System die Arbeit auf. Die lokale Maschine jedes Teilnehmers berechnet die unmittelbaren, hochgeschicklichen Kräfte, die sie spüren, wie etwa den Widerstand in einem Lenkrad oder die Vibration eines Fahrradlenkers, während ein zentraler Server den breiteren Verkehrsfluss und die Positionen anderer Fahrzeuge verwaltet. Dieses Design stellt sicher, dass das Feedback, das ein Mensch spürt, unmittelbar und realistisch ist, selbst wenn die Teilnehmer sich in unterschiedlichen Gebäuden oder Städten befinden. Durch die Kombination dieser verteilten Berechnungen mit einer gemeinsamen virtuellen Umgebung haben die Forscher eine Plattform geschaffen, auf der mehrere Menschen sicher üben und studieren können, wie sie aufeinander reagieren in gemischtem Verkehr, wobei die echten sozialen Dynamiken erfasst werden, die künstliche Intelligenz oft übersieht.
Das System basiert auf einem Fundament der Modularität, was bedeutet, dass es sich an verschiedene Hardware-Setups anpassen kann, ohne dass ein kompletter Neubau erforderlich ist. Es unterstützt drei verschiedene Fortbewegungsmodi: das Autofahren, das Radfahren und das Gehen. Für das Auto verbindet sich das System mit Standard-Fahsimulatoren mit Lenkrädern und Pedalen. Für das Fahrrad wird es mit intelligenten Trainingsgeräten (Smart Trainers) verbunden, die den Widerstand anpassen können, um Hügel oder Wind nachzubilden. Für Fußgänger werden Virtual-Reality-Headsets und Kameras verwendet, um Körperbewegungen zu verfolgen, wodurch eine Person natürlich gehen und die Welt aus einer menschlichen Höhe sehen kann. Was diesen Ansatz einzigartig macht, ist die Fähigkeit, diese unterschiedlichen Erfahrungen in perfekter Synchronität zu halten. Wenn ein Fußgänger in der Virtual Reality eine Bordsteinkante betritt, sieht der Fahrer im Autosimulator diese Bewegung sofort und nimmt die entsprechende Veränderung in der Straßenumgebung wahr. Das System erreicht dies durch die sorgfältige Trennung der rechenintensiven globalen Verkehrsverwaltung von den sensiblen, schnelllebigen Berechnungen der individuellen Bewegung.
In der Vergangenheit beruhte die Verbindung mehrerer Simulatoren oft auf Softwareschichten, die als Vermittler fungierten und Nachrichten hin und her leiteten. Die Forscher fanden heraus, dass diese Vermittler zu viel Verzögerung einführten, was für Systeme, die auf physischem Feedback wie Kraftrückkopplung oder Bewegungsplattformen basieren, inakzeptabel ist. Um dies zu lösen, umgeht CARLAverse diese zusätzlichen Schichten und ermöglicht es den lokalen Maschinen, direkt mit dem zentralen Server über gestraffte Kommunikationskanäle zu kommunizieren. Diese direkte Leitung stellt sicher, dass wenn ein Fahrer das Lenkrad dreht, das virtuelle Auto sofort reagiert und der Kraftrückkopplungs-Motor gegen seine Hand drückt, ohne eine merkliche Verzögerung. Ebenso passt sich der Widerstand beim Radfahrer in Echtzeit an, wenn er in die Pedale tritt, um dem virtuellen Gelände zu entsprechen. Diese Präzision ist entscheidend, da selbst eine winzige Verzögerung dazu führen kann, dass sich eine Person unwohl fühlt oder ihr Gefühl der Präsenz in der Simulation verliert.
Die Forscher integrierten zudem fortschrittliche Funktionen, um das Erlebnis immersiver zu gestalten. Das System generiert Sound basierend auf dem Standort des Nutzers, sodass ein Autofahrer das Motorengeräusch je nach Position in der Stadt unterschiedlich hört und ein Fußgänger ein herannahendes Auto aus der korrekten Richtung wahrnimmt. Die visuellen Elemente werden mit Sorgfalt behandelt, um sicherzustellen, dass die Bilder auf Bildschirmen oder Headsets perfekt mit der Perspektive des Nutzers übereinstimmen, was die Schwindelgefühle verhindert, die oft in der Virtual Reality auftreten. Für den Fahrradsimulator berechnet das System sogar die physikalischen Kräfte von Wind und Straßenneigung, um den Widerstand auf dem Trainingsgerät anzupassen, was die Fahrt authentisch macht. Für Fußgänger nutzt das System Standard-Webcams zur Verfolgung der Körperbewegungen und überträgt die Art und Weise, wie eine Person sich neigt oder gestikuliert, in die virtuelle Welt, was natürliche Interaktionen wie Winken oder Umsehen ermöglicht.
Das ultimative Ziel dieser Arbeit ist es, ein Werkzeug zum Verständnis des menschlichen Verhaltens im Verkehr bereitzustellen. Indem echte Menschen in einen gemeinsamen virtuellen Raum versetzt werden, können Forscher beobachten, wie sie Vorrangverhandlungen führen, wie sie ihre Absichten signalisieren und wie sie auf unerwartete Ereignisse reagieren. Diese Daten sind mit künstlichen Agenten allein schwer zu gewinnen, da Computer oft daran scheitern, die subtilen Nuancen der menschlichen Körpersprache und des Zögerns zu replizieren. Das CARLAverse-Framework ermöglicht groß angelegte Experimente, bei denen mehrere Institutionen gleichzeitig teilnehmen können, indem sie Simulatoren über weite Entfernungen hinweg verbinden. Diese Fähigkeit öffnet die Tür zur Untersuchung komplexer Verkehrsszenarien, die Autos, Fahrräder und Menschen gleichzeitig involvieren, und bietet ein tieferes Verständnis des sozialen Gefüges unserer Straßen. Obwohl das System derzeit eine Simulation ist, planen die Forscher, seine physikalischen Modelle weiter zu validieren und seine Fähigkeiten zu erweitieren, einschließlich der Hinzufügung von Bewegungsplattformen für Fahrräder und omnidirektionalen Laufbändern für Fußgänger. Durch die Bereitstellung dieser Technologie als offen und zugänglich hofft das Team, die Barrieren für andere Forscher zu senken, ähnliche Studien durchzuführen, und so eine kollaborative Anstrengung zu fördern, um zukünftige Transportsysteme sicherer und besser auf menschliche Bedürfnisse abgestimmt zu machen.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.