Socratic AI and Scientific Argumentation: An Epistemic Network Analysis of Student Reasoning Patterns
Deze studie maakt gebruik van Epistemic Network Analysis om aan te tonen dat middelbare scholieren die deelnemen aan Argument-Driven Inquiry met Socratic AI, in vergelijking met degenen in traditionele of controlegroepen, onderscheidende en bredere redeneerpatronen vertonen, met name bij het evalueren van concurrerende argumenten en het geven van persoonlijke rechtvaardigingen.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
In de moderne wereld betekent wetenschappelijke geletterdheid meer dan alleen het onthouden van feiten over atomen of ecosystemen. Het vereist het vermogen om bewijsmateriaal af te wegen, verschillende standpunten te overwegen en een redelijk argument op te bouwen wanneer men wordt geconfronteerd met complexe kwesties zoals klimaatverandering of de volksgezondheid. Deze vaardigheid, bekend als wetenschappelijke argumentatie, is een kerndoel van onderwijs, maar is berucht moeilijk te onderwijzen. Traditionele klaslokalen worstelen vaak met het bieden van de persoonlijke begeleiding die nodig is om leerlingen verder te laten gaan dan eenvoudige meningen en toe te bewegen naar diepgaande, op bewijs gebaseerde redeneringen. Decennialang hebben docenten vertrouwd op een methode genaamd argumentgestuurde inquiry (argument-driven inquiry), waarbij leerlingen argumenten opbouwen, elkaars werk bekritiseren en hun denken herzien. Dit proces is echter sterk afhankelijk van de kwaliteit van de feedback door medeleerlingen, wat inconsistent kan zijn. Nu kunstmatige intelligentie een onderdeel van het dagelijks leven wordt, is er een nieuwe vraag ontstaan: kan een computerprogramma, ontworig om vragen te stellen in plaats van antwoorden te geven, leerlingen helpen dieper na te denken dan zij uit zichzelf zouden kunnen?
Een team van onderzoekers aan de Texas A&M University zette zich in om deze vraag te beantwoorden door een specifiek type kunstmatige intelligentie te testen dat bekend staat als Socratic AI. In tegen tegenstelling tot chatbots die simpelweg feiten verstrekken of essays voor leerlingen schrijven, is Socratic AI geprogrammeerd om te fungeren als een bedachtzame tutor. Het gebruikt een methode van bevraging die de leerling dwingt om de eigen redenering uit te leggen, het eigen bewijsmateriaal te evalueren en alternatieve perspectieven te overwegen. Om te zien of deze aanpak werkt in een echte klasomgeving, voerden de onderzoekers een studie uit met 90 tiende-klasleerlingen in Taiwan. Ze verdeelden de leerlingen in drie groepen om te zien hoe verschillende soorten ondersteuning hun vermogen om wetenschappelijk te argumenteren beïnvloedde. Eén groep werkte op de traditionele manier, gebruikmakend van de argument-driven inquiry-methode met menselijke medeleerlingen. Een tweede groep gebruikte dezelfde methode, maar ontving feedback van de Socratic AI tijdens de peer-reviewfase. De derde groep diende als controlegroep en ontving geen speciale interventie. Alle leerlingen werden gevra been om vóór en na de activiteit essays te schrijven, waarbij ze een complexe sociaal-wetenschappelijke kwestie aanpakten die van hen vroeg een standpunt in te nemen en dit met bewijs te rechtvaardigen.
De onderzoekers telden niet alleen hoeveel woorden de leerlingen schreven of hoeveel correcte feiten zij bevatten. In plaats daarvan keken zij naar de structuur van het denken van de leerlingen. Ze analyseerden de geschreven essays om te zien hoe verschillende onderdelen van een argument met elkaar verbonden waren. Ze onderzochten bijvoorbeeld of een leerling simpelweg een bewering formuleerde en daarna verderging, of dat zij die bewering verbond aan bewijsmateriaal, een tegenargument overwoog en vervolgens hun positie herzag op basis van die nieuwe informatie. Ze keken ook naar de onderliggende overtuigingen van de leerlingen over kennis: zagen zij wetenschappelijke feiten als vaststaand en onveranderlijk, of als complexe ideeën die worden opgebouwd door middel van redeneren en die kunnen worden bijgesteld met nieuwe bewijzen? Door deze verbindingen in kaart te brengen, konden de onderzoekers de "vorm" van het redeneren van een leerling visualiseren.
De resultaten toonden een duidelijk verschil tussen de groepen. De leerlingen in de controlegroep, die geen speciale ondersteuning ontvingen, vertoonden zeer weinig verandering in hun manier van redeneren. Hun essays bleven gericht op het formuleren van eenvoudige beweringen en het citeren van basisfeiten, met weinig betrokkenheid bij tegengestelde standpunten. De leerlingen in de traditionele peer-reviewgroep verbeterden aanzienlijk. Zij begonnen hun beweringen sterker te verbinden met bewijsmateriaal en begonnen de redenering achter de argumenten van hun medeleerlingen te identificeren. Toch hadden hun denkprocessen nog steeds beperkingen; ze gingen zelden in op het moeilijkste deel van wetenschappelijk redeneren: het kritisch evalueren van concurrerende argumenten en het synthetiseren daarvan tot een nieuw, sterker evenwicht.
De groep die de Socratic AI gebruikte, vertoonde de meest geavanceerde ontwikkeling. Hun redeneerpatronen werden veel complexer en meer onderling verbonden. In hun definitieve essays waren deze leerlingen veel vaker geneigd om concurrerende argumenten te evalueren, de kracht van verschillende stukken bewijsmateriaal af te wegen en nieuwe rechtvaardigingen te construeren die meerdere perspectieven combineerden. De AI leek hen verder te duwen dan menselijke medeleerlingen dat deden. Wanneer de onderzoekers de interactielogs tussen de leerlingen en de AI analyseerden, stelden zij vast dat het systeem in de meeste gevallen werkte zoals bedoeld. De AI stelde regelmatig open vragen die van de leerlingen vereisten dat zij hun eigen ideeën uitlegden, hun keuzes rechtvaardigden en andere mogelijkheden overwogen. In ongeveer de helft van de interacties leidde de leerling de redenering, waarbij de AI fungeerde als een stimulator. In een ander derde deel werkten de leerling en de AI samen om een idee op te bouwen. In een klein deel van de interacties nam de AI de leiding en leverde substantieel redeneren wanneer een leerling vastliep of om een direct antwoord vroeg.
Deze bevinding suggereert dat hoewel Socratic AI de diepgang van het redeneren van leerlingen aanzienlijk kan vergroten, het geen perfect substituut is voor menselijk denken. De studie geeft aan dat het vermogen van de AI om te helpen afhangt van hoe goed het de verantwoordelijkheid voor het argument bij de leerling houdt. Wanneer de AI vragen stelde die de leerling dwongen om na te denken, werden de redeneernetwerken van de leerling robuuster. Maar wanneer de AI zelf de redenering overnam, liep het risico het leerproces te kortsluiten. De onderzoekers merkten op dat de leerlingen die de AI gebruikten, er niet simpelweg een nieuwe autoriteitsfiguur aan waren geworden waar zij afhankelijk van waren. In plaats daarvan leken zij de informatie van de AI te behandelen als iets dat geëvalueerd en geïntegreerd moest worden met hun eigen redenering, in plaats van het blindelings te accepteren.
De studie concludeert dat het combineren van gestructureerde argumentatiemethoden met Socratic AI grote belofte inhoudt voor het wetenschappelijk onderwijs. Het biedt een manier om consistente, hoogwaardige bevraging te bieden die moeilijk te bereiken kan zijn met alleen menselijke medeleerlingen. De onderzoekers waarschuwen echter dat het ontwerp van de AI er groot belang bij speelt. Om echt effectief te zijn, moet het systeem zo worden geconfigureerd dat het cognitieve werk in handen van de leerling blijft, zelfs wanneer de leerling worstelt. Het doel is om de technologie te gebruiken om het denkproces te ondersteunen (scaffolding), niet om het te vervangen. Naarmate kunstmatige intelligentie meer geïntegreerd raakt in het klaslokaal, zal het begrijpen van deze nuances essentieel zijn om ervoor te zorgen dat deze hulpmiddelen leerlingen helpen de kritische redeneervaardigheden te ontwikkelen die zij nodig hebben om in een complexe wereld te navigeren.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.