From Pixels to Physicality: Wave-Mediated Interaction above a Screen
Ce document présente un panneau visuo-physique transparent qui utilise le filtrage inverse spatiotemporel pour focaliser les ultrasons directement depuis la surface de l'affichage, permettant un retour haptique dynamique dans l'air et la manipulation d'objets sans obstruer la zone de vision.
Article original sous licence CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Ceci est une explication générée par l'IA de l'article ci-dessous. Elle n'a pas été rédigée ni approuvée par les auteurs. Pour une précision technique, consultez l'article original. Lire la clause de non-responsabilité complète
La plupart des écrans que nous utilisons aujourd'hui sont des fenêtres qui nous montrent un monde de lumière et de couleur, mais ils s'arrêtent là. Si une vidéo montre une balle rebondissant, la balle reste prisonnière du verre ; si un personnage souffle une bougie, l'air dans la pièce reste immobile. Pendant des décennies, les scientifiques ont tenté de combler ce fossé, en créant des écrans capables de pousser, tirer ou toucher l'air qui les entoure pour rendre les objets numériques réels. Certains systèmes utilisent des centaines de petits haut-parleurs opaques pour projeter des ondes sonores dans l'air, créant des points de pression invisibles qui peuvent soulever des objets légers ou être ressentis par le bout d'un doigt. Cependant, ces configurations traditionnelles bloquent souvent la vue ou nécessitent des équipements encombrants placés à côté de l'écran, séparant l'image visuelle de la sensation physique.
Une équipe de chercheurs de l'Institut supérieur de science et de technologie de Corée (KAIST) a trouvé un moyen de fusionner ces deux mondes en une seule feuille de verre transparente. Ils ont développé un panneau transparent qui ne sert pas seulement de fenêtre pour les images, mais aussi de gigantesque haut-parleur invisible capable de focaliser des ondes sonores en des points spécifiques dans l'air au-dessus de lui. En transformant toute la surface de l'écran en une source sonore, ils ont créé un système où le contenu visuel et l'interaction physique se produisent exactement au même endroit, sans qu'aucun matériel opaque ne vienne entraver la vue.
Le dispositif, que les chercheurs appellent panneau visuo-physique transparent, ressemble à une feuille de verre standard, mais il possède un anneau de minuscules composants électroniques fixés sur ses bords. Lorsque les chercheurs envoient des signaux électriques à ces composants de bordure, ils font vibrer le verre selon des motifs complexes. Ces vibrations voyagent à travers le verre et poussent contre l'air, créant des faisceaux d'ultrasons focalisés. Contra\à un haut-parleur normal qui diffuse le son dans toutes les directions, ce panneau utilise une méthode de calcul sophistiquée pour diriger les ondes sonores afin qu'elles se rejoignent en un point précis dans l'air, un peu comme une loupe qui concentre la lumière du soleil. Parce que le verre lui-même vibre pour créer le son, la zone de visionnage reste claire et sans obstruction.
Pour que cela fonctionne, les chercheurs ont dû résoudre un problème difficile : les ondes sonores se comportent de manière imprévisible lorsqu'elles traversent le verre, ricochant et se dispersant avant même d'atteindre l'air. Au lieu d'essayer de prédire chaque détour avec une simple formule, l'équipe a mesuré précisément comment le verre réagissait à différents signaux électriques. Ils ont ensuite utilisé un ordinateur pour calculer à rebours le motif électrique exact nécessaire pour annuler les vibrations désordonnées et forcer le son à se focaliser sur un point souhaité. Ce processus leur permet de créer une boule serrée de son à haute pression en plein air, qui peut être déplacée ou multipliée selon les besoins.
Lors de leurs tests, l'équipe a démontré que ce son focalisé est assez puissant pour accomplir un travail réel. Ils ont placé une fine bande de papier à 50 millimètres au-dessus du panneau de verre. Lorsqu'ils ont focalisé le son sur le papier, la force invisible l'a soulevé dans les airs. Ils ont montré qu'ils pouvaient déplacer cette force de levage le long d'un chemin, ramassant une série de bandes de papier une par une, ou créer plusieurs points de levage simultanément pour maintenir plusieurs objets en même temps. La pression sonore générée atteignait près de 1 000 pascals, un niveau suffisant pour interagir physiquement avec des objets légers sans les toucher.
Au-delà du déplacement d'objets, les chercheurs ont exploré si les humains pouvaient ressentir ces forces invisibles. Ils ont demandé à dix volontaires de placer leurs mains au-dessus du panneau tout en portant des casques pour bloquer le son de la vibration. En activant et désactivant le son rapidement, ils ont créé une pression rythmique que les participants pouvaient ressentir sur leur peau. Les volontaires pouvaient non seulement détecter le toucher, mais aussi déterminer la direction dans laquelle le son se déplaçait, comme vers le haut, le bas, la gauche ou la droite, avec une précision de plus de 94 %. Cela a prouvé que le panneau pouvait fournir une forme de toucher qui existe dans l'air, indépendamment de la surface de l'écran.
La démonstration finale a réuni les éléments visuels et physiques. Les chercheurs ont placé le panneau de verre sur un écran d'ordinateur standard et ont installé une rangée de petites bougies devant celui-ci. Sur l'écran, ils ont diffusé une vidéo d'une personne en train de souffler. Au moment exact où la vidéo montrait la personne soufflant, le panneau a focalisé un faisceau de son sur la bougie réelle correspondante. La force du son était assez puissante pour éteindre la flamme, créant une illusion parfaite où l'action numérique provoquait un résultat physique dans le monde réel. Cette expérience a montré que l'écran pouvait aligner ce que vous voyez avec ce que vous ressentez et ce qui se passe dans la pièce, le tout sans aucun dispositif opaque obstruant la vue.
Les chercheurs soulignent que cette approche diffère des méthodes précédentes qui reposent sur des réseaux de centaines de haut-parleurs individuels opaques. Ces systèmes nécessitent souvent que les haut-parleurs soient placés autour de l'écran ou utilisent des écrans spéciaux qui peuvent masquer l'image. En utilisant le panneau de verre lui-même comme source sonore, ce nouveau design maintient la zone de visionnage totalement dégagée. Bien que le système actuel fonctionne mieux avec des objets légers et nécessite un calibrage précis, ce travail prouve qu'une surface transparente unique peut servir à la fois de fenêtre pour la lumière et d'outil de manipulation physique. Cela ouvre la possibilité d'écrans futurs où la frontière entre l'image numérique et le monde physique n'est plus une barrière, mais un espace partagé où les images peuvent atteindre et toucher le spectateur.
Noyé(e) sous les articles dans votre domaine ?
Recevez des digests quotidiens des articles les plus récents correspondant à vos mots-clés de recherche — avec des résumés techniques, dans votre langue.