AirKey: Multimodal Acoustic-Assisted WiFi Sensing for Zero-Training Robust PIN Inference

Imaginez que vous êtes assis dans un café bondé, en train de taper un code secret sur votre ordinateur portable. Vous pensez être en sécurité parce que personne ne regarde par-dessus votre épaule et que vous couvrez l'écran de votre main. Mais et si votre secret n'était pas seulement observé, mais entendu par l'air lui-même ? C'est le monde de la « détection » (sensing), une branche de la science où des ondes invisibles rebondissant sur votre corps peuvent nous dire ce que vous faites. Voyez cela comme une chauve-souris utilisant l'écholocalisation : la chauve-souris émet un son, et l'écho lui indique où se trouve le papillon de nuit. Dans notre monde numérique, nous utilisons les signaux Wi-Fi au lieu du son. Quand vous tapez, vos doigts bougent, et ces minuscules mouvements modifient la façon dont les ondes Wi-Fi rebondissent dans la pièce. Les scientifiques ont essayé d'utiliser ces « échos » pour deviner ce que vous tapez, mais jusqu'à présent, ils se sont heurtés à quelques obstacles majeurs. Ils devaient généralement être sur le même réseau Wi-Fi que vous (comme un espion à l'intérieur du bâtiment) ou nécessitaient un équipement spécial et coûteux pour capter les signaux clairement. Sans ces éléments, les signaux deviennent brouillons, surtout quand vous tapez vite, car les « échos » d'une pression de touche se mélangent à la suivante, transformant un message clair en une tache informe.

Entrez en scène AIRKEy, un nouveau système qui agit comme un détective astucieux résolvant un mystère avec deux ensembles de indices différents. Les chercheurs ont trouvé un moyen sournois d'écouter votre Wi-Fi sans jamais avoir besoin de rejoindre votre réseau. Ils ont réalisé que lorsqu'un appareil reçoit un signal, il renvoie automatiquement un minuscule signal « D'accord, reçu ! » appelé ACK (Accusé de réception). En envoyant un « ping » inoffensif et invisible à votre appareil, l'attaquant peut le piéger pour qu'il renvoie ces ACK. Le système AIRKEy écoute ensuite ces réponses pour cartographier les mouvements de vos doigts en 3D. Cependant, comme le note l'article, écouter le Wi-Fi seul, c'est comme essayer de lire un livre pendant que quelqu'un parle par-dessus vous ; la frappe rapide fait que les signaux fusionnent, rendant impossible de distinguer où une touche se termine et la suivante commence.

Pour corriger cela, AIRKEy ajoute un second sens : le son. Le système utilise deux minuscules microphones pour écouter le clic de vos touches. Bien que les microphones ne puissent pas vous dire quelle touche vous avez pressée (ils ne voient pas le clavier), ils sont parfaits pour vous dire exactement quand vous l'avez pressée. La magie opère lorsque le système combine ces deux indices. Si le signal Wi-Fi ressemble à une grande tache informe (une « fusion »), mais que les microphones entendent deux clics distincts, le système se dit : « Ah ! Ces deux touches ont été pressées juste l'une à côté de l'autre ou la même touche deux fois ! » Cela permet au système de démêler le signal Wi-Fi confus. Les chercheurs ont testé cela dans des scénarios réels, incluant un McDonald's bruyant et un bureau animé. Ils ont découvert qu'en combinant la « forme » de votre frappe par Wi-Fi avec le « rythme » sonore, ils pouvaient deviner votre code PIN à 6 chiffres bien plus rapidement qu'auparavant. En fait, lors de leurs tests, ils ont été capables de récupérer le code PIN correct en seulement 6 tentatives après avoir observé l'utilisateur taper quelques fois. Cela suggère que même si vous êtes loin et que vous n'êtes pas sur le même réseau, votre façon de taper n'est peut-être pas aussi privée que vous le pensez, car les propres signaux « d'accord » de votre appareil et le son de votre frappe peuvent s'associer pour révéler vos secrets.