Empowering Children to Create AI-Enabled Augmented Reality Experiences
Cet article présente Capybara, un environnement de programmation visuelle propulsé par l'IA qui permet aux enfants de créer, personnaliser et animer des expériences de réalité augmentée 3D interactives en exploitant l'IA générative pour la création de personnages et la vision par ordinateur pour jeter un pont entre les mondes virtuel et physique, comme le valident des études utilisateurs menées aux États-Unis et en Argentine.
Article original sous licence CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Ceci est une explication générée par l'IA de l'article ci-dessous. Elle n'a pas été rédigée ni approuvée par les auteurs. Pour une précision technique, consultez l'article original. Lire la clause de non-responsabilité complète
Imaginez le monde numérique comme un immense terrain de jeu magique où les règles sont écrites en code. Depuis des années, les enfants peuvent construire des châteaux et faire la course avec des voitures dans ce terrain de jeu en utilisant des outils comme Scratch, qui leur permet d'assembler des pièces de puzzle colorées au lieu de taper des instructions complexes. Mais il y a un bémol : la plupart de ces mondes numériques restent prisonniers de l'écran. Ils ne peuvent pas voir le monde réel autour de vous, et ils ne peuvent pas réagir à la tasse de café sur votre bureau ou au chien qui passe à vos pieds.
Maintenant, imaginez si ce terrain de jeu numérique pouvait tendre la main vers le monde réel, le toucher et changer en fonction de ce qu'il voit. C'est la magie de la Réalité Augmentée (RA), qui revient à porter des lunettes spéciales qui vous permettent de voir des personnages numériques flotter juste au-dessus de votre propre salon. Et si vous ajoutez l'Intelligence Artificielle (IA) à ce mélange, c'est comme donner un cerveau à ces personnages numériques pour qu'ils puissent comprendre ce qu'ils regardent. La grande question que se posent les chercheurs est la suivante : pouvons-nous confier les clés de ce terrain de jeu magique et intelligent aux enfants ? Pouvons-nous leur permettre non seulement de jouer avec ces mondes numériques intelligents, mais aussi de les construire, en mélangeant leur imagination avec des objets du monde réel ?
C'est exactement ce qu'une équipe de chercheurs a entrepris de faire avec un nouvel outil appelé Capybara. Considérez Capybara comme un « ensemble de Lego pour le futur », mais au lieu de briques en plastique, vous utilisez des commandes vocales et des mouvements corporels pour construire. Les chercheurs ont créé une application pour tablettes qui permet aux enfants de créer leurs propres personnages en 3D, de les faire danser et de les programmer pour qu'ils interagissent avec des objets réels comme des bananes ou des claviers.
Voici comment cela fonctionne : d'abord, un enfant peut parler à l'application et dire : « Je veux un capybara portant un chapeau de sorcier », et l'IA dessine instantanément une version en 3D. Ensuite, l'enfant peut se lever et agiter les bras ; l'application observe son corps et fait en sorte que le personnage numérique copie les mouvements, tel un marionnettiste contrôlant une marionnette. Enfin, l'enfant peut utiliser des « blocs de détection » pour dire au personnage : « Si tu vois une banane sur le sol, saute par-dessus ». L'application utilise sa caméra pour repérer la vraie banane et fait en sorte que le personnage numérique réagisse à elle.
L'équipe a testé cela avec 20 enfants, âgés de 7 à 16 ans, aux États-Unis et en Argentine. Ils ont constaté que les enfants pouvaient utiliser avec succès Capybara pour créer leurs propres histoires en réalité mixte. Les enfants ont adoré la liberté de faire en sorte que leurs personnages ressemblent exactement à ce qu'ils imaginaient et de les faire danser selon leurs propres mouvements. Ils avaient l'impression de construire quelque chose de vraiment unique, comblant le fossé entre leur chambre physique et un monde numérique.
Cependant, les chercheurs ont également remarqué quelques obstacles sur la route. Parfois, l'IA seissait un peu confuse. Si un enfant demandait un type de chapeau spécifique, l'IA pouvait en fabriquer un qui avait l'air un peu bizarre, ce qui frustrait les enfants. De plus, certains enfants étaient tellement enthousiastes à l'idée de pousser l'IA à dessiner le personnage parfait qu'ils en oubliaient de terminer l'histoire qu'ils essayaient de raconter. L'étude suggère que, bien que cet outil soit un moyen amusant et puissant pour les enfants d'apprendre la programmation et l'IA, il nécessite un peu plus de guidage pour les aider à rester concentrés et à gérer les erreurs occasionnelles de l'IA.
En bref, Capybara suggère que les enfants sont prêts à être les architectes de mondes intelligents et interactifs, mais qu'ils ont besoin d'outils aussi patients et clairs qu'ils sont créatifs. C'est une étape prometteuse vers un avenir où les enfants ne se contentent pas de consommer du contenu numérique, mais créent leurs propres réalités magiques qui vivent aux côtés du monde réel.
Noyé(e) sous les articles dans votre domaine ?
Recevez des digests quotidiens des articles les plus récents correspondant à vos mots-clés de recherche — avec des résumés techniques, dans votre langue.