From Pixels to Physicality: Wave-Mediated Interaction above a Screen
Dieses Papier präsentiert ein transparentes visuo-physisches Panel, das spatiotemporale Inversfilterung nutzt, um Ultraschall direkt von der Displayoberfläche zu fokussieren, was dynamisches haptisches Feedback in der Luft sowie die Manipulation von Objekten ermöglicht, ohne den Sichtbereich zu blockieren.
Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Die meisten Bildschirme, die wir heute verwenden, sind Fenster, die uns eine Welt aus Licht und Farbe zeigen, aber sie hören dort auf. Wenn ein Video zeigt, wie ein Ball springt, bleibt der Ball hinter dem Glas gefangen; wenn eine Figur eine Kerze ausbläst, bleibt die Luft im Raum unbewegt. Seit Jahrzehnten versuchen Wissenschaftler, diese Lücke zu schließen, indem sie Displays entwickeln, die die Luft um sie herum drücken, ziehen oder berühren können, um digitale Objekte fühlbar zu machen. Einige Systeme nutzen hunderte kleiner, opaker Lautsprecher, um Schallwellen in die Luft zu blasen, wodurch unsichtbare Druckpunkte entstehen, die leichte Objekte heben oder an der Fingerspitze spürbar sein können. Diese traditionellen Aufbauten blockieren jedoch oft die Sicht oder erfordern sperrige Geräte neben dem Bildschirm, was das visuelle Bild von der physischen Empfindung trennt.
Ein Forschungsteam am Korea Advanced Institute of Science and Technology hat einen Weg gefunden, diese beiden Welten in einer einzigen, klaren Glasscheibe zu verschmelzen. Sie entwickelten ein transparentes Paneel, das nicht nur als Fenster für Bilder dient, sondern als riesiger, unsichtbarer Lautsprecher fungiert, der Schallwellen in spezifische Punkte in der Luft über sich fokussieren kann. Indem sie die gesamte Oberfläche des Displays zur Schallquelle machten, schufen sie ein System, in dem visuelle Inhalte und physische Interaktion am exakt gleichen Ort stattfinden, ohne dass opake Hardware im Weg steht.
Das Gerät, das die Forscher ein „transparentes visuo-physisches Paneel“ nennen, sieht aus wie eine Standard-Glasscheibe, besitzt jedoch einen Ring aus winzigen elektronischen Komponenten an seinen Kanten. Wenn die Forscher elektrische Signale an diese Randkomponenten senden, bringen sie das Glas dazu, in komplexen Mustern zu vibrieren. Diese Vibrationen wandern über das Glas und drücken gegen die Luft, wodurch fokussierte Ultraschallstrahlen entstehen. Im Gegensatz zu einem normalen Lautsprecher, der den Schall in alle Richtungen streut, nutzt dieses Paneel eine ausgeklügelte Berechnungsmethode, um die Schallwellen so zu steuern, dass sie an einem einzigen, präzisen Punkt in der Luft zusammenlaufen, ganz ähnlich wie eine Lupe das Sonnenlicht bündelt. Da das Glas selbst vibriert, um den Schall zu erzeugen, bleibt der gesamte Sichtbereich klar und ungehindert.
Um dies zu ermöglichen, mussten die Forscher ein schwieriges Problem lösen: Die Schallwellen verhalten sich unvorhersehbar, während sie durch das Glas wandern, indem sie abprallen und sich ausbreiten, noch bevor sie die Luft erreichen. Anstatt zu versuchen, jedes Verdrehen und jede Wendung mit einer einfachen Formel vorherzusagen, maß das Team genau, wie das Glas auf verschiedene elektrische Signale reagierte. Anschließend nutzten sie einen Computer, um rückwärts zu rechnen und das exakte elektrische Muster zu berechnen, das die chaotischen Vibrationen aufhebt und den Schall dazu zwingt, an einem gewünschten Punkt zu fokussieren. Dieser Prozess ermöglicht es ihnen, eine dichte Kugel aus hochkonzentriertem Schalldruck in der Luft zu erzeugen, die je nach Bedarf bewegt oder vervielfältigt werden kann.
In ihren Tests demonstrierte das Team, dass dieser fokussierte Schall stark genug ist, um echte Arbeit zu leisten. Sie platzierten einen dünnen Papierstreifen 50 Millimeter über dem Glaspaneel. Als sie den Schall auf das Papier fokussierten, hob die unsichtbare Kraft es in die Luft. Sie zeigten, dass sie diese Hebekraft entlang eines Pfades bewegen konnten, um nacheinander eine Reihe von Papierstreifen aufzuheben, oder mehrere Hebekräfte gleichzeitig erzeugen konnten, um mehrere Objekte simultan zu halten. Der von ihnen erzeugte Schalldruck erreichte fast 1.000 Pascal – ein Niveau, das ausreicht, um physisch mit leichten Objekten zu interagieren, ohne diese zu berühren.
Über das Bewegen von Objekten hinaus untersuchten die Forscher, ob Menschen diese unsichtbaren Kräfte fühlen können. Sie baten zehn Freiwillige, ihre Hände über das Paneel zu halten, während sie Kopfhörer trugen, um das Geräusch der Vibration zu blockieren. Durch das schnelle Ein- und Ausschalten des Schalls erzeugten sie einen rhythmischen Druck, den die Teilnehmer auf ihrer Haut spüren konnten. Die Freiwilligen konnten nicht nur die Berührung wahrnehmen, sondern auch erkennen, in welche Richtung sich der Schall bewegte, etwa oben, unten, links oder rechts, mit einer Genauigkeit von über 94 Prozent. Dies bewies, dass das Paneel eine Form von Berührung bieten kann, die in der Luft existiert, unabhängig von der Oberfläche des Bildschirms.
Die abschließende Demonstration brachte die visuellen und physischen Elemente zusammen. Die Forscher platzierten das Glaspaneel über einem Standard-Computermonitor und stellten eine Reihe kleiner Kerzen vor das Paneel. Auf dem Bildschirm spielten sie ein Video einer Person ab, die pustet. In dem Moment, als das Video zeigte, wie die Person pustet, fokussierte das Paneel einen Schallstrahl auf die entsprechende reale Kerze. Die Kraft des Schalls war stark genug, um die Flamme zu löschen, wodurch eine nahtlose Illusion entstand, in der die digitale Handlung eine physische Folge in der realen Welt auslöste. Dieses Experiment zeigte, dass das Display das, was man sieht, mit dem, was man fühlt und was im Raum geschieht, in Einklang bringen kann – und das alles, ohne dass opake Geräte die Sicht versperren.
Die Forscher betonen, dass sich dieser Ansatz von bisherigen Methoden unterscheidet, die auf Anordnungen von hunderten einzelner, opaker Lautsprecher basieren. Diese Systeme erfordern oft, dass die Lautsprecher um das Display herum platziert werden oder spezielle Bildschirme verwenden, die das Bild trüben können. Durch die Nutzung des Glaspaneels selbst als Schallquelle hält dieses neue Design den Sichtbereich vollständig frei. Während das aktuelle System am besten mit leichten Objekten funktioniert und eine präzise Kalibrierung erfordert, beweist die Arbeit, dass eine einzige transparente Oberfläche sowohl als Fenster für Licht als auch als Werkzeug zur physischen Manipulation dienen kann. Es eröffnet die Möglichkeit für zukünftige Displays, bei denen die Grenze zwischen dem digitalen Bild und der physischen Welt kein Hindernis mehr ist, sondern ein gemeinsamer Raum, in dem Bilder nach außen reichen und den Betrachter berühren können.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.