Human-Guided AI Interaction in Task-Based Language Teaching: Effects of ChatGPT and Embodied Multimodal Conversational AI in Mixed Reality on ESL Learners’ Job Interview Anxiety and Oral Performance

Technische Samenvatting: Mens-gestuurde AI-interactie in Taakgericht Talenonderwijs

Probleemstelling
Leerlingen van Engels voor Specifieke Doeleinden (ESP), met name zij die zich voorbereiden op scenario's met een hoge inzet zoals sollicitatiegesprekken, worden geconfronteerd met aanzienlijke barrières bij het ontwikkelen van mondelinge vaardigheid. Traditioneel onderwijs lijdt vaak onder grote klassen, een gebrek aan personalisatie en beperkte mogelijkheden voor authentieke interactie, wat de angst voor een vreemde taal (Foreign Language Anxiety, FLA) verergert. Hoewel er diverse interventies bestaan, is er een kritiek gat in geïntegreerd onderzoek dat de impact van verschillende AI-gemedieerde interactiemodaliteiten — specifiek spraakgestuurde generatieve AI versus belichaamde multimodale agenten in Mixed Reality (MR) — tegelijkertijd vergelijkt met de invloed op spreekprestaties en angst. Bovendien vertrouwen bestaande studies vaak uitsluitend op zelfgerapporteerde angstmetingen, waarbij fysiologische gegevens ontbreken om affectieve staten in realtime vast te leggen.

Methodologie
Deze studie maakte gebruik van een quasi-experimenteel mixed-methods ontwerp over een zes weken durende interventie waarbij 75 volwassen ESL-leerlingen betrokken waren bij een "Skills for Success"-cursus. Deelnemers werden toegewezen aan een van de drie condities:

1. Controlegroep: Traditioneel door een instructeur geleid onderwijs.
2. ChatGPT-groep: Interactie via de spraakmodus van ChatGPT, waarbij prompt engineering werd gebruikt om een ESL-sollicitatiegesprek-trainer te simuleren.
3. MECAI-groep (Multimodale Belichaamde Conversationele AI): Interactie met een belichaamde AI-agent binnen een Mixed Reality-omgeving (gebruikmakend van Meta Quest Pro-headsets en Unity/Convovia SDK's). De agent beschikte over oogcontact, gebaren en spraakinteractie binnen een gesimuleerde kantooromgeving.

Dataverzameling en Analyse:

• Prestaties: Pre- en post-interventie oefensollicitatiegesprekken werden beoordeeld met behulp van een gestandaardiseerde analytische rubriek die vloeiendheid, uitspraak, grammatica, woordenschat, inhoud en relevantie besloeg. Scores werden samengevoegd voor een algehele prestatiemetriek.
• Angst: Gemeten via de Foreign Language Classroom Anxiety Scale (FLCAS) en fysiologische hartslagmonitoring (Polar OH1) tijdens de gesprekken.
• Kwalitatief: Gestructureerde interviews met deelnemers werden thematisch geanalyseerd om de percepties van leerlingen te begrijpen.
• Statistisch: Een twee-weg repeated measures ANOVA werd gebruikt om verschillen in prestaties, hartslag en FLCAS-scores tussen groepen en over tijd te analyseren.

Belangrijkste Resultaten

• Mondelinge Prestaties: Alle groepen vertoonden een significante verbetering van de pre- naar de post-test. De MECAI-groep toonde echter de grootste winst (pre: 9,36; post: 18,52), gevolgd door de ChatGPT-groep (pre: 8,96; post: 15,52) en de controlegroep (pre: 7,92; post: 12,88). Paarsgewijze vergelijkingen bevestigden statistisch significante verschillen tussen alle drie de condities ($p < 0,001$).
• Angst (FLCAS en Hartslag): Hoewel beschrijvende trends suggereerden dat de angst in de MECAI-groep afnam (zowel in zelfrapportage als hartslag), bereikten noch de FLCAS noch de hartslagmetingen statistische significantie over de groepen of over de tijd. De studie merkt op dat prestatieverbeteringen de meetbare afname van angst kunnen voorafgaan, of dat het scenario met een hoge inzet de fysiologische opwinding in stand hield ondanks verbeterde vaardigheden.
• Kwalitatieve Bevindingen: De thematische analyse onthulde vier kernthema's:
  1. De rol van AI bij zelfvertrouwen: AI bood een oordeelvrije omgeving voor oefening, hoewel het gebrek aan non-verbale signalen in de alleen-spraakgroep als een beperking werd genoteerd.
  2. Immersie en Aanwezigheid: De MECAI-groep rapporteerde een sterk gevoel van "er zijn" en realisme, waarbij de belichaamde agent werd waargenomen als een "echt persoon" of een vertrouwde adviseur.
  3. Onmisbare menselijke instructeur: Alle groepen benadrukken dat AI een aanvulling is, geen vervanging voor menselijke docenten die emotionele afstemming en culturele begeleiding bieden.
  4. Omgaan met Angst: Leerlingen zagen matige angst als potentieel productief en merkten op dat AI de angst voor negatieve evaluatie verminderde in vergelijking met menselijke gesprekspartners.

Betekenis en Claims
Het artikel claimt dat belichaamde conversationele AI in Mixed Reality significante voordelen biedt voor de ontwikkeling van ESP-spreekvaardigheid, waarbij het zowel traditioneel onderwijs als spraakgestuurde AI overtreft wat betreft de winst in mondelinge prestaties. De studie suggereert dat de "belichaming" van de AI-agent — het bieden van visuele signalen, gebaren en een gevoel van sociale aanwezigheid — bijdraagt aan deze winsten effectiever dan interactie via alleen audio.

De auteur neemt echter een bescheiden standpunt in met betrekking tot angstvermindering. Er wordt expliciet gesteld dat de studie geen sterk bewijs levert dat AI-gestuurde oefening de angst binnen de zes weken vermindert, aangezien statistische significantie niet werd bereikt voor de angstmetingen. De betekenis van het werk ligt in het aantonen dat hoewel AI (met name op basis van MR) de prestaties aanzienlijk kan verbeteren, het het beste functioneert als een pedagogisch hulpmiddel dat door menselijke instructeurs wordt begeleid, in plaats van als een op zichzelf staande oplossing. Het onderzoek benadrukt de noodzaak van verder onderzoek naar de mechanismen van sociale aanwezigheid en de langetermijnoverdracht van vaardigheden naar authentieke werkcontexten.