EEG decodability of facial expressions and their stereoscopic depth cues in immersive virtual reality
Cette étude démontre que, bien que la réalité virtuelle immersive avec des indices de profondeur stéréoscopiques suscite des signatures neurales distinctes pour le traitement de la profondeur, la représentation neurale des expressions faciales demeure robuste et invariante à ces variations de profondeur, validant ainsi la faisabilité de l'utilisation de l'EEG en VR totalement immersive pour étudier la perception des visages en milieu naturel.
Article original sous licence CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Ceci est une explication générée par l'IA d'un preprint qui n'a pas été évalué par des pairs. Ce n'est pas un avis médical. Ne prenez pas de décisions de santé basées sur ce contenu. Lire la clause de non-responsabilité complète
Les visages humains sont les signaux visuels les plus importants que nous rencontrons. Ils nous permettent de reconnaître des amis, des inconnus et les émotions qu'ils ressentent, souvent en une fraction de seconde. Bien que nous sachions beaucoup de choses sur la façon dont le cerveau traite ces signaux, la plupart des études scientifiques se sont appuyées sur des images plates et bidimensionnelles présentées sur des écrans d'ordinateur. Cette approche néglige une partie cruciale de la vision dans la vie réelle : la profondeur. Dans le monde naturel, nous voyons les visages en trois dimensions, où nos deux yeux capturent des images légèrement différentes que le cerveau fusionne pour créer une sensation d'espace et de forme. Cette fusion, connue sous le nom de profondeur stéréoscopique, est un indice puissant qui nous aide à comprendre le monde qui nous entoure. Pourtant, il reste incertain si cette couche supplémentaire d'informations de profondeur modifie la façon dont le cerveau reconnaît spécifiquement un sourire, une moue ou un regard de surprise, ou si le cerveau traite l'émotion et la profondeur comme des flux d'informations distincts.
Pour répondre à cela, des chercheurs ont mis en place une expérience qui ramène la perception des visages dans un monde tridimensionnel. Ils ont invité trente-quatre participants à porter un casque de réalité virtuelle pendant que leur activité cérébrale était enregistrée à l'aide d'une calotte de capteurs placés sur le cuir chevelu. À l'intérieur du monde virtuel, les participants voyaient des visages générés par ordinateur qui semblaient flotter devant eux. Ces visages affichaient quatre émotions distinctes : le bonheur, la colère, la surprise et une expression neutre. L'expérience a été conçue avec un tour astucieux. Pour la moitié des essais, les visages étaient présentés avec une pleine profondeur stéréoscopique, ce qui signifie que les caméras virtuelles imitaient la légère différence de vue entre l'œil gauche et l'œil droit, créant un véritable effet 3D. Pour l'autre moitié, les chercheurs présentaient exactement les mêmes visages mais les aplatissaient en une image bidimensionnelle unique, supprimant les indices de profondeur tout en conservant tous les autres détails visuels identiques. La tâche des participants consistait simplement à regarder le visage, puis à identifier l'émotion qu'il exprimait.
Les chercheurs ont utilisé une méthode appelée décodage multivarié pour analyser les signaux cérébraux. Au lieu de chercher un pic d'activité unique à un moment précis, cette technique examine le motif complexe de l'activité électrique à travers l'ensemble du cerveau pour voir s'il contient assez d'informations pour distinguer une émotion d'une autre. Les résultats ont été clairs et robustes : les signaux cérébraux contenaient de manière fiable des informations sur l'émotion que le participant voyait. Les chercheurs ont pu distinguer avec succès un visage joyeux d'un visage en colère, ou un visage surpris d'un visage neutre, en se basant uniquement sur les motifs électriques enregistrés sur le cuir chevelu. Cela a confirmé que même avec la complexité ajoutée d'un casque de réalité virtuelle, la réponse du cerveau aux expressions faciales est suffisamment forte pour être mesurée et décodée.
Cependant, la découverte la plus significative a été ce qui s'est produit lorsque les chercheurs ont comparé les deux conditions de visionnage. Ils s'attendaient à ce que le fait de voir un visage en 3D puisse modifier la façon dont le cerveau traite l'émotion, peut-être en rendant la reconnaissance plus rapide ou le signal cérébral plus fort. Au lieu de cela, ils ont constaté que la capacité du cerveau à décoder l'émotion était exactement la même, que le visage soit en 3D ou en 2D. La présence de la profondeur stéréoscopique n'a pas altéré la signature neuronale de l'émotion. Le cerveau semblait traiter l'expression émotionnelle comme une caractéristique stable qui reste constante, quels que soient les indices de profondeur. Cela suggère que, pour les visages statiques clairs vus de face, le cerveau extrait la signification émotionnelle indépendamment des informations de profondeur spatiale.
L'étude a également examiné si le cerveau pouvait faire la différence entre les conditions 3D et 2D. Il le pouvait. Lorsque les chercheurs ont entraîné un décodeur spécifiquement pour rechercher les indices de profondeur, ils ont trouvé un motif distinct dans les signaux cérébraux qui apparaissait très tôt, en une fraction de seconde après l'apparition du visage. Ce motif a montré que le cerveau traitait effectivement l'information de profondeur, mais qu'il le faisait d'une manière qui n'interférait pas avec ou ne modifiait pas le traitement de l'émotion. Les deux types d'informations — la profondeur et l'expression — étaient présents dans le cerveau simultanément mais semblaient être gérés par des mécanismes séparés.
Pour s'assurer que ces découvertes n'étaient pas simplement un artefact des signaux électriques du cerveau, les chercheurs ont également suivi l'endroit où les participants regardaient. Ils ont découvert que, bien que les yeux des participants bougeaient légèrement différemment selon l'émotion, ces mouvements oculaires n'expliquaient pas les signaux cérébraux. Le cerveau a décodé l'émotion avant même que les yeux ne se soient déplacés pour se focaliser sur des caractéristiques spécifiques, et les signaux cérébraux contenaient des informations sur la profondeur du visage que les mouvements oculaires ne possédaient pas. Cela a confirmé que les résultats étaient une véritable réflexion de la façon dont le cerveau traite le monde visuel, et non simplement un enregistrement de l'endroit où les yeux se trouvaient à pointer.
En fin de compte, ce travail démontre que nous pouvons désormais étudier le cerveau humain dans un cadre tridimensionnel beaucoup plus naturel sans perdre la précision des méthodes traditionnelles de laboratoire. Il révèle que, bien que nos cerveaux soient sensibles à la profondeur d'un visage, la représentation centrale d'une expression faciale reste remarquablement stable. Que nous voyions le sourire d'un ami dans une photographie plate ou dans un espace tridimensionnel, le code fondamental de notre cerveau pour cette émotion semble rester le même.
Noyé(e) sous les articles dans votre domaine ?
Recevez des digests quotidiens des articles les plus récents correspondant à vos mots-clés de recherche — avec des résumés techniques, dans votre langue.