Spectrally Enriched 3D Models for Representation and Interpretation of Elemental Data in Augmented Reality

Imaginez que vous tenez entre vos mains un artefact fragile, vieux de plusieurs siècles. Il pourrait s'agir d'un fragment de céramique peinte, d'un bijou délicat ou d'un modèle botanique fait de papier et de colle. Pour comprendre sa composition, les scientifiques utilisent souvent une technique appelée la Spectroscopie par Plasma Induit par Laser. Cette méthode consiste à projeter de minuscules impulsions de lumière à haute énergie sur la surface d'un objet. Chaque impulsion vaporise une quantité microscopique de matière, créant un bref flash de plasma qui révèle les éléments chimiques présents à cet endroit précis. C'est un outil puissant pour dévoiler l'histoire des matériaux, de l'identification de pigments anciens à la détection de minéraux traces. Cependant, il y a un piège : le processus laisse un minuscule cratère là où le laser a frappé. Si un scientifique veut cartographier l'ensemble de la surface d'un objet pour voir comment sa composition change d'une zone à l'autre, il doit tirer des milliers de ces impulsions. Sur une surface plane et robuste, cela pourrait être acceptable. Mais sur un objet fragile, courbe ou tridimensionnel, l'effet cumulatif de milliers de petits cratères peut causer des dommages visibles, altérant l'objet même que les chercheurs tentent d'étudier.

Le défi consiste donc à apprendre tout ce qui est possible sur la composition chimique d'un objet sans le détruire. Pour les objets plats, les chercheurs ont développé un contournement ingénieux : ils prennent une photographie, utilisent un ordinateur pour regrouper les couleurs d'apparence similaire, puis tirent le laser uniquement sur quelques points représentatifs au sein de chaque groupe. Cela réduit considérablement le nombre de tirs nécessaires. Mais cette approche échoue lorsque l'objet n'est pas plat. Une photographie aplatit le monde, cachant les courbes, les bosses et les recoins dissimulés d'un objet réel. Si vous tentez de cartographier une surface courbe en utilisant uniquement une image plate, vous pourriez regrouper deux zones qui se ressemblent sur la photo mais qui sont en réalité éloignées sur l'objet réel, ou vous pourriez manquer un détail crucial caché dans une ombre ou une courbe concave. Pour résoudre ce problème, une équipe de chercheurs de l'INESC TEC et de l'Université de Porto, au Portugal, a développé une nouvelle façon d'analyser ces formes complexes. Ils sont allés au-delà des images plates et ont créé un système qui comprend la véritable forme tridimensionnelle d'un objet, leur permettant de cartographier sa chimie avec beaucoup moins de tirs laser et un risque de dommage nettement réduit.

Les chercheurs ont testé leur nouvelle méthode sur un objet spécifique et délicat : un modèle de champignon en papier mâché du XIXe siècle, plus précisément une Amanita muscaria, conservé au Musée d'Histoire Naturelle et des Sciences de l'Université de Porto. Le modèle est composé de deux pièces distinctes, un pied et un chapeau, et a été initialement créé pour un usage pédagogique. Comme le matériau est fragile et que l'objet possède une forme arrondie complexe, il constituait un candidat idéal pour cette expérience. L'équipe a commencé par créer un jumeau numérique précis du champignon. À l'aide d'un scanner 3D qui projette une lumière laser bleue, ils ont capturé la géométrie exacte et la texture de la surface de l'objet. Ce processus a produit un modèle numérique détaillé qui comprenait non seulement la forme, mais aussi la couleur et les détails fins de la surface, stockés sous la forme d'une carte de texture haute résolution enveloppée autour de la forme 3D.

Avec le modèle numérique en main, l'équipe a dû décider où tirer le laser. Au lieu de regarder une photographie plate, ils ont regardé directement le modèle 3D. Ils ont utilisé un algorithme informatique pour diviser la surface du champignon en des milliers de petites zones irrégulières appelées superpixels. Crucialement, cet algorithme ne regardait pas seulement la couleur ; il considérait également l'emplacement physique de chaque zone dans l'espace tridimensionnel. Il garantissait qu'une zone rouge sur le chapeau du champignon ne soit pas regroupée avec une zone rouge sur le pied si elles étaient éloignées dans la réalité, même si elles se ressemblaient sur une image plate. Cette étape a créé une carte de l'objet qui respectait sa véritable géométrie, préservant les limites entre les différentes parties du champignon tout en divisant la surface en régions cohérentes et gérables.

Une fois la surface divisée en ces zones géométriquement conscientes, l'équipe a simplifié les données. Ils ont calculé la couleur moyenne de chaque zone, puis ont regroupé les zones en grappes plus larges basées sur la similitude de leurs couleurs. Ce processus a réduit la complexité de la surface du champignon, passant de millions de pixels individuels à un nombre beaucoup plus restreint de régions distinctes. Le résultat fut une segmentation identifiant les principales zones visuelles de l'objet, telles que le chapeau rouge avec des taches blanches et le pied blanc, tout en respectant les courbes et les contours du modèle physique. À partir de chacun de ces groupes finaux, les chercheurs ont sélectionné un seul ou quelques points représentatifs pour les analyser au laser.

Cette stratégie a conduit à une réduction spectaculaire du nombre de tirs laser requis. Au lieu de scanner l'ensemble de la surface avec plus de 221 000 points potentiels, ce qui aurait laissé le papier mâché fragile criblé de cratères, l'équipe n'a sélectionné que 40 tirs spécifiques. Ces 40 tirs étaient suffisants pour capturer l'information chimique essentielle de l'objet entier. En analysant la lumière émise par ces quelques points, ils pouvaient déduire la composition élémentaire des zones environnantes au sein de chaque grappe. Les impulsions laser ont été réglées à un niveau d'énergie faible, créant des points d'ablation d'environ 300 micromètres de diamètre, garantissant que les dommages soient microscopiques et localisés.

L'étape finale consistait à redonner vie à ces données d'une manière facile à comprendre. L'équipe a projeté les résultats de leurs 40 tirs laser sur le modèle numérique 3D. Ils ont ensuite utilisé la technologie de réalité augmentée pour visualiser les découvertes. En portant un casque spécialisé, l'utilisateur pouvait regarder le champignon numérique flottant dans l'espace et voir les différents groupes chimiques mis en évidence directement sur sa surface. L'interface permettait de faire pivoter le modèle, de zoomer et de sélectionner des éléments spécifiques pour voir où ils se trouvaient. Cela a fourni une vue spatialement contextualisée, permettant aux experts comme aux non-experts de voir exactement comment la composition chimique se rapportait à la forme physique et à la texture de l'artefact.

L'étude démontre qu'il est possible d'étendre les avantages de l'échantillonnage intelligent des images plates en deux dimensions aux objets complexes en trois dimensions. En incorporant la géométrie réelle d'un objet dans l'analyse, les chercheurs peuvent éviter les distorsions et les erreurs découlant de l'aplatissement d'une surface courbe. Cette approche ne fait pas que gagner du temps ; elle change fondamentalement la relation entre l'analyse et la préservation. Elle permet aux scientifiques de recueillir des données chimiques riches et détaillées spatialement à partir d'objets historiques fragiles sans les soumettre aux dommages cumulatifs d'un balayage complet. Ces travaux suggèrent une nouvelle voie pour la science du patrimoine culturel, où l'intégrité de l'objet est prioritaire, et où les outils d'analyse sont adaptés à la nature véritablement tridimensionnelle du monde que nous essayons de comprendre.