Associations Between Multi-Source Formative Assessment and Summative Examination Performance in Undergraduate Diagnostic Medicine: Evidence Supporting Programmatic Assessment
Deze studie toont aan dat multi-source formatieve assessments over cognitieve, procedurele en communicatieve domeinen significante incrementele validiteit bieden in het voorspellen van de prestaties van bachelorstudenten op diagnostische medische examens, waardoor het ontwerp van multidomein programmatische assessmentsystemen wordt ondersteund terwijl de beperkingen van theoretische opdrachten vanwege plafondeffecten worden benadrukt.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je voor dat je probeert uit te zoeken wie de beste bakker van een stad is. Je zou ze gewoon kunnen vragen om op een zaterdag één gigantische taart te bakken en hen te beoordelen op basis van dat ene resultaat. Dat is als een "summatieve" toets: een grote, laatste examen dat eenmalig plaatsvindt. Maar wat als je wilde zien hoe ze daadwerkelijk leren? Wat als je ze elke week brood zag bakken, zag hoe ze omgingen met een lastig deeg, en luisterde naar hoe ze met hun klanten praatten? Dat is "formatieve" beoordeling: een reeks kleinere, laagdrempelige controles die gedurende een tijdspanne plaatsvinden om studenten te helpen groeien.
In de wereld van de geneeskunde proberen docenten uit te vinden wat de beste manier is om deze twee benaderingen te mengen. Ze gebruiken een systeem dat "programmatische beoordeling" wordt genoemd, wat lijkt op het bouwen van een enorme mozaïek uit honderden kleine tegeltjes. Elk tegeltje is een kleine opdracht of een snelle controle. Het idee is dat als je naar al die tegeltjes samen kijkt, je een veel duidelijker beeld krijgt van de vaardigheden van een student dan wanneer je slechts naar één groot beeld kijkt. Maar hier komt het lastige deel bij: voorspellen al die kleine tegeltjes daadwerkelijk hoe goed een student zal presteren op het grote eindexamen? En voegen verschillende soorten tegels — zoals tegels die het brein testen, tegels die handvaardigheid testen en tegels die communicatieve vaardigheden testen — elk iets unieks toe aan de puzzel?
Deze studie van de Guangdong Medical University duikt precies in die vraag. De onderzoekers keken naar 382 geneeskundestudenten die een cursus volgden in diagnostische geneeskunde (het leren uitzoeken wat er mis is met een patiënt). Ze volgden vijf verschillende soorten huiswerk en praktijktaken die gedurende het semester plaatsvonden, die allemaal werden geregistreerd op één enkel online platform. Ze wilden zien of deze "oefentegeltjes" de scores van de studenten op de uiteindelijke schriftelijke toets konden voorspellen.
Dit is wat ze vonden, en het is een beetje als een verrassingsfeestje waarbij sommige gasten veel nuttiger zijn dan anderen. Ten eerste ontdekten ze dat bijna elke vorm van praktijktaken gekoppeld was aan de score op het eindexamen. Als een student goed presteerde op de oefening, hadden ze de neiging om ook goed te presteren op het eindexamen. Echter, toen de onderzoekers dieper keken om te zien welke taken de echte onafhankelijke voorspellers waren (wat betekent: welke nieuwe informatie toevoegden die de anderen niet al dekten), werden de resultaten interessant.
De "breinachtige" taken waren een gemengd pakketje. Eén type huiswerk, waarbij studenten direct na een college meerkeuzevragen beantwoordden, bleek een beetje een truc te zijn. De scores waren zo hoog voor iedereen (een gemiddelde van 89,04 op 100) dat het een soort plafondeffect veroorzaakte; bijna iedereen raakte de top, waardoor het geen verschil kon maken tussen een goede student en een geweldige student. Het was te makkelijk en te kort na de les om een nuttige voorspeller te zijn. Maar de andere cognitieve taak, genaamd Problem-Based Learning (PBL), was een superster. Bij PBL werken studenten in groepen om complexe medische mysteries op te lossen. Deze taak was een sterke voorspeller, wat suggereert dat het vermogen om een probleem analytisch door te denken een enorme sleutel tot succes is.
Toen waren er de "handvaardige" taken. De studenten moesten video's van zichzelf opnemen terwijl ze lichamelijk onderzoek uitvoerden (zoals het controleren van een hartslag of het beluisteren van longen) en feedback kregen van docenten. Deze video-opdracht was een andere grote winnaar. Het voorspelde de scores op het eindexamen, zelfs nadat rekening was gehouden met hoe slim de studenten waren of hoe goed ze presteerden bij de groepspuzzels. Dit suggereert dat de handeling van het opnemen van jezelf, het krijgen van feedback en het verbeteren van je techniek je daadwerkelijk helpt de stof diepgaand te leren, en niet alleen hoe je je handen moet bewegen.
Ten slotte was er de "menselijke" taak. Studenten oefenden met het praten tegen acteurs (ook wel gestandaardiseerde patiënten genoemd) om te leren hoe ze een medische voorgeschiedenis moeten uitvragen. Deze taak voegde een kleine maar reële boost toe aan de voorspelling. Het was niet de grootste factor, maar het voegde wel een uniek stuk informatie toe die de andere tests misten.
Wanneer je al deze stukjes bij elkaar legt, vonden de onderzoekers dat deze verschillende soorten praktijktaken ongeveer 50,5% van de verschillen in hoe studenten presteerden op het eindexamen verklaarden. De onderzoekers concludeerden dat een goed beoordelingssysteem alle drie de soorten "tegeltjes" nodig heeft: cognitief (denken), procedureel (doen) en communicatief (praten). Ze leerden ook dat als je wilt dat een huiswerkopdracht een goede voorspeller is van toekomstig succes, deze uitdagend genoeg moet zijn om de studenten van elkaar te onderscheiden, en niet slechts een snelle, makkelijke quiz direct na een les. Door één online platform te gebruiken om al deze gegevens te verzamelen, kunnen scholen een veel rijker en nauwkeuriger beeld opbouwen van de reis van een student, wat bewijst dat leren meer inhoudt dan alleen het slagen voor één groot examen.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.