Active Learning vs Traditional Lecturing in Introductory Mechanics: A Pooled Pass-Rate Benchmark Under Common Departmental Assessments from a Latin American Institutional Change Initiative

Technische Samenvatting: Actief Leren versus Traditioneel Docentschap in Introductie Mechanica

Probleem en Context
Het verbeteren van het succes van studenten in de introductiecursus natuurkunde blijft een hardnekkige uitdaging, met name in Latijns-Amerikaanse contexten waar de middelen beperkt zijn en de voorbereiding van instromende studenten heterogeen is. Hoewel Physics Education Research (PER) de effectiviteit van Actief Leren (AL) ten opzichte van Traditioneel Docentschap (TL) heeft vastgesteld in Noord-Amerikaanse en Europese onderzoeksuniversiteiten, is er een aanzienlijk gebrek aan literatuur die de implementatie en resultaten van deze praktijken in grote, publieke Latijns-Amerikaanse instellingen beschrijft. Deze studie adresseert die kloof door te rapporteren over een institutioneel pilotproject voor verandering bij de Universidad Autónoma Metropolitana-Iztapalapa (UAM-I) in Mexico. Het specifieke probleem is het bieden van een transparante benchmark van de slaagpercentages van studenten in "Elementary Mechanics I" (EM1) onder AL versus TL condities, gebruikmakend van gemeenschappelijke afdelingsbeoordelingen om vergelijkbaarheid tussen secties te waarborgen.

Methodologie
De studie analyseert gegevens van het najaarstrimester 2025 (gecodeerd als 25-O) aan de UAM-I. De implementatie omvatte acht secties van EM1: twee secties onder leiding van instructeurs getraind in AL-methoden (gelabeld als AL) en zes secties onder leiding van instructeurs die traditionele methoden gebruiken (gelabeld als TL).

• Operationele Definities: De labels AL en TL zijn operationeel en weerspiegelen de specifieke implementatie door de faculteit in plaats van een rigide, gestandaardiseerd protocol. AL-secties omvatten instructeurs en assistenten (TA's) die een sequentie van workshops, materiaalvoorbereiding en voortdurende ondersteuning doorliepen, waarbij technieken zoals groepswerk en facilitatie werden toegepast. TL-secties werden gegeven door ervaren instructeurs die niet deelnamen aan de AL-trainingssequentie.
• Databron: De analyse steunt uitsluitend op geaggregeerde, gedeïdentificeerde sectie-niveau tellingen uit officiële eindverslagen van het semester. Gegevens op studentniveau, demografie en scores per item werden niet gebruikt.
• Beoordelingen: Vier uitkomsten werden geanalyseerd: de eerste tussentijdse toets, de tweede tussentijdse toets, een gemeenschappelijk globaal examen (geschreven door een onafhankelijke commissie) en het definitieve cijfer voor het vak. De eerste drie examens vormen 50% van het eindcijfer; de resterende 50% wordt door de instructeurs bepaald.
• Statistische Analyse:
  • Frequentistische benadering: Gepoolde slaagkansen ($p_{\beta,a}$) werden geschat voor elke modaliteit ($\beta \in \{AL, TL\}$) en beoordeling ($a$). Onzekerheid werd gekwantificeerd met behulp van Wilson binomiale betrouwbaarheidsintervallen. De primaire effectgrootte metriek was het Risicoverschil ($RD_a = p_{AL,a} - p_{TL,a}$), waarbij 95% betrouwbaarheidsintervallen werden berekend met de Newcombe–Wilson methode om de onbetrouwbaarheid van Wald-intervallen voor proporties nabij 0 of 1 te vermijden.
  • Bayesiaanse benadering: Een referentieanalyse met behulp van Jeffreys priors ($Beta(1/2, 1/2)$) werd toegepast om posterieure verdelingen voor slaagpercentages en risicoverschillen te genereren.
  • Sensitiviteitsanalyse: Om mogelijke clusteringeffecten (correlatie van uitkomsten binnen secties) en het gebrek aan randomisatie aan te pakken, werd een hiërarchisch Bayesiaans model met een random intercept voor secties gefit. Dit model bracht sectie-niveau voorspellingen terug naar student-gewogen gepoolde estimanden om vergelijkbaarheid met het eenvoudige binomiale model te waarborgen.
  • Kwalitatieve Ondersteuning: Klaspraktijken werden gemonitord met behulp van het Classroom Observation Protocol for Undergraduate STEM (COPUS) om te valideren dat AL- en TL-secties onderscheidende interactiepatronen vertoonden (bijv. groepswerk versus docentschap).

Belangrijkste Resultaten
Over alle beoordelingen heen waren de gepoolde slaagpercentages hoger in de AL-secties dan in de TL-secties.

• Slaagpercentages: De AL-secties presteerden consequent beter dan de TL-secties. Voor het globale examen was het gepoolde slaagpercentage 55,6% (AL) versus 32,6% (TL). Voor het definitieve cijfer waren de percentages 67,7% (AL) versus 45,1% (TL).
• Risicoverschillen: Het risicoverschil ($RD$) was positief voor alle beoordelingen. De meest robuuste scheiding werd waargenomen bij het globale examen ($RD = 22,9$ procentpunt, 95% CI [5,1, 39,5]) en het definitieve cijfer ($RD = 22,6$ procentpunt, 95% CI [6,6, 37,2]). De 95% betrouwbaarheidsintervallen voor deze twee beoordelingen bevatten nul niet.
• Tussentijdse Toetsen: De eerste en tweede tussentijdse toetsen vertoonden positieve risicoverschillen (respectievelijk 12,3 en 6,2 procentpunten), maar hun betrouwbaarheidsintervallen bevatten nul, wat aangeeft dat de data compatibel is met zowel een positief effect als geen effect op het 95%-niveau voor deze specifieke beoordelingen.
• Robuustheid: De hiërarchische Bayesiaanse sensitiviteitsanalyse, die rekening hield met clustering op sectieniveau, leverde resultaten op die zeer consistent zijn met het eenvoudige gepoolde binomiale model. De kwalitatieve conclusie dat AL-secties hogere slaagpercentages vertoonden, bleef ongewijzigd.
• COPUS-bevindingen: Observaties bevestigden dat AL-secties een significant hogere prevalentie van studentengroepswerk en instructorfacilitatie vertoonden, terwijl TL-secties werden gedomineerd door docentschap en bordwerk, wat het operationele onderscheid tussen de modaliteiten valideert.

Claims en Betekenis
Het artikel formuleert expliciet zijn bijdrage als een transparante benchmark in plaats van een causale identificatie van een specifieke instructietechniek.

• Bescheiden Claims: De auteurs benadrukken dat de studie niet het causale effect van een specifieke instructietechniek (bijv. clickers of peer instruction) isoleert noch een universele effectgrootte claimt. De resultaten weerspiegelen "AL zoals geïmplementeerd" versus "TL zoals geïmplementeerd" in een specifieke, door middelen beperkte institutionele setting. Het ontwerp is niet gerandomiseerd, en zelfselectie van studenten in secties voorkomt aanpassing voor compositorische verschillen.
• Betekenis:
  1. Contextueel Bewijs: Het biedt de eerste gedocumenteerde resultaten van een institutionele schaal AL-implementatie in een grote, publieke Mexicaanse universiteit, waarmee het tekort aan PER-literatuur in Latijns-Amerika wordt aangepakt.
  2. Haalbaarheid: Het demonstreert dat zelfs met een steile leercurve voor instructoren en beperkte middelen, een ondersteunde AL-implementatie geassocieerd kan worden met hogere slaagresultaten in kernvakken.
  3. Methodologische Template: De studie biedt een praktisch sjabloon voor afdelingen die instructieverandering willen evalueren met behulp van geaggregeerde administratieve gegevens. Het benadrukt de waarde van gemeenschappelijke afdelingsbeoordelingen voor vergelijking tussen secties en schetst een pad voor toekomstige evaluatie met betrekking tot student-niveau covariaten en een robuustere kwalitatieve analyse.
  4. Implementatiefactoren: De resultaten suggereren dat implementatiesteun (training, materiaalvoorbereiding, TA-bezetting) integraal zijn aan de "AL"-interventie en als onderdeel van het veranderingsmodel moeten worden beschouwd in plaats van als incidentele details.

Samenvattend concludeert het artikel dat onder de beperkingen van geaggregeerde institutionele rapportage en een enkel trimester, de AL-implementatie geassocieerd was met hogere gepoolde slaagkansen, met name bij het gemeenschappelijke globale examen en het definitieve cijfer, wat een bemoedigend signaal geeft voor de besluitvorming van afdelingen in soortgelijke contexten.