From C1 Exit Standards to Enacted Proficiency: A Mixed-Methods Study of Score Interpretation and Assessment Alignment in an EFL Higher Education Programme

Technische Samenvatting: Van C1-exitstandaarden naar Verwezenlijkte Bekwaamheid

Probleemstelling
Het artikel behandelt een kritieke kloof in resultaatgerichte programma's voor Engels als vreemde taal (EFL) in het hoger onderwijs: de discontinuïteit tussen formeel verklaarde geavanceerde exitstandaarden (specifiek C1) en de werkelijke "verwezenlijkte bekwaamheid" die door lerenden wordt getoond. Hoewel C1-standaarden steeds vaker worden gebruikt om curriculumverwachtingen en kwaliteitsborging te organiseren, betoogt de studie dat de waarde van een standaard niet inherent is aan de aanwezigheid ervan in een beleidsdocument. In plaats daarvan is de waarde afhankelijk van hoe de standaard wordt vertaald naar toetsbare taken, interpreteerbaar bewijs van scores, diagnostische feedback en daaropvolgende actie van de lerende. Het centrale probleem is niet of een C1-standaard is verklaard, maar hoe deze zichtbaar, interpreteerbaar en bruikbaar wordt binnen de specifieke leerpraktijken en de beoordelingsecologie van een lokaal programma.

Methodologie
De studie hanteert een mixed-methods design, waarbij een enkel bachelorprogramma voor de Engelse taal aan een publieke universiteit in Vietnam wordt behandeld als een "begrensde analytische casus" in plaats van een nationaal representatieve steekproef. Het onderzoek richt zich op de transitie van B2- naar C1-bekwaamheid.

• Deelnemers: De kwantitatieve tak omvatte de volledige cohort van 91 derdejaarsstudenten. De kwalitatieve tak omvatte 12 docenten en één programmacoördinator.
• Instrumenten en Databronnen:
  1. Modulecijfers: Secundaire gegevens van vier kernmodules voor praktische Engelse taal (Luisteren-Spreken 4, Lezen-Schrijven 4, Geavanceerd Lezen-Luisteren, en Geavanceerd Spreken-Schrijven). Een interne score-drempel van 8,6 werd gebruikt als een C1-gerelateerde indicator op basis van institutionele regels voor kredietoverdracht, expliciet vermeld als niet een extern gevalideerde CEFR-maatstaf.
  2. Studentenenquête: Een 7-punts Likert-schaal enquête, aangepast van de Motivated Strategies for Learning Questionnaire (MSLQ), die Intrinsieke Waarde, Tijd en Leeromgeving, en Leerautonomie meet. Het legde ook zelfevaluatie van CEFR-niveaus en leerbarrières vast.
  3. Docenten/Coördinator Vragenlijst: 35 Likert-items die betrekking hebben op bewustzijn van standaarden, percepties van bekwaamheid en feedbackpraktijken, naast open vragen.
• Analyse: Kwantitatieve gegevens werden geanalyseerd met behulp van SPSS 27.0 (Spearman-correlaties, Wilcoxon Signed-Rank tests, descriptieve statistiek) vanwege niet-normale verdelingen. Kwalitatieve gegevens ondergingen inductieve thematische analyse (Braun & Clarke, 2006). Triangulatie werd uitgevoerd over modulecijfers, studentenonderzoeken en docentgegevens.

Belangrijkste Resultaten

• Behalen van de Benchmark: Slechts 9,9% van de studenten voldeed aan de interne C1-gerelateerde benchmark (score ≥ 8,6) in de module Geavanceerd Spreken-Schrijven. In tegen plaats voldeed 33,0% aan de benchmark in Geavanceerd Lezen-Luisteren. In de fundamentele module Lezen-Schrijven 4 scoorde 95,6% van de studenten onder de 8,0.
• Vaardigheidsontwikkeling: Luisteren was de enige vaardigheid die een statistisch significante verbetering liet zien van het B2-fundament naar het C1-geavanceerde stadium. Spreken, Lezen en Schrijven vertoonden geen significante ontwikkeling; de scores voor Schrijven daalden zelfs licht.
• Zelfregulatie van de Lerende: Hoewel 90,5% van de studenten de belangrijkheid van zelfstudie buiten de klas erkende, rapporteerde slechts 40,9% dat zij wekelijks 2 tot 4 uur onafhankelijk studeerden. Er was een significante kloof tussen het waarderen van Engels (hoge Intrinsieke Waarde) en het organiseren van duurzame zelfstudie (lagere scores voor Tijd en Leeromgeving).
• Correlaties: Intrinsieke Waarde was alleen significant geassocieerd met de scores voor Geavanceerd Lezen-Luisteren. Geen enkele variabele aan de kant van de lerende (inclusief zelfstudiegedrag en autonomie) was significant geassocieerd met de scores voor Geavanceerd Spreken-Schrijven.
• Feedback en Barrières: Studenten beoordeelden de kwaliteit van het onderwijs over het algal positief, maar gaven de laagste scores voor "geïndividualiseerde instructie-feedback". De primaire gerapporteerde barrières waren het gebrek aan communicatieve praktijk in het echte leven, onvoldoende discipline bij zelfstudie en beperkingen in academische woordenschat/grammatica.

Belangrijkste Bijdragen
Het artikel draagt bij aan het vakgebied door geavanceerde bekwaamheid niet louter te herdefiniëren als een label van bereik, maar als een "beoordelingsgebruiksketen" (assessment-use chain). Het toont aan dat voor de verwezenlijking van een C1-standaard een coherente afstemming vereist is van:

1. Interpreteerbaar Beoordelingsbewijs: Verder gaan dan ruwe scores naar bewijs waarmee studenten hun prestaties kunnen situeren ten opzichte van een doel.
2. Diagnostische Feedback: Feedback die niet alleen gericht is op informatieoverdracht, maar op een proces dat opname en daaropvolgende actie ondersteunt.
3. Begeleide Zelfregulerende Leerprocessen: De noodzaak om lerenden te ondersteunen bij het gebruik van criteria en feedback om hun eigen voortgang te plannen en te monitoren, met name bij productieve vaardigheden.

De studie benadrukt dat motivatie (Intrinsieke Waarde) alleen onvoldoende is om geavanceerde productieve prestaties aan te drijven zonder de structurele ondersteuning van specifieke zelfregulerende routines en actiegerichte feedbackloops.

Betekenis en Claims
De auteurs stellen expliciet dat de empirische basis lokaal is en dat de bevindingen niet bedoeld zijn voor statistische generalisatie naar andere Vietnamese of Aziatische programma's. De betekenis van het artikel ligt in de beoordelingsvragen die het oproept voor EFL-programma's die vertrouwen op geavanceerde exitstandaarden.

Het artikel betoogt dat de geobserveerde "C1-kloof" waarschijnlijk een "probleem van beoordelingsgebruik" is in plaats van een simpel falen van de capaciteiten van de student. Het suggereert dat programma's de afstemming moeten onderzoeken tussen:

• Exitstandaarden en cursus-taken.
• Het bewijs dat wordt gebruikt om bekwaamheid te interpreteren.
• Feedbackmogelijkheden gekoppeld aan werk met productieve vaardigheden.
• Ondersteuningsstructuren voor de zelfstudieplanning van studenten.

De studie concludeert dat C1-georiënteerde bekwaamheid het best begrepen kan worden als een "pedagogisch geconstrueerde uitkomst" die afhankelijk is van intern beoordelingsbewijs, diagnostische feedback en begeleide zelfregulerende leerprocessen. Er wordt gepleit voor toekomstig werk op het gebied van het koppelen van interne modulecijfers aan externe CEFR-niveaus en voor programma-evaluaties die zich richten op het bruikbaar maken van geavanceerde standaarden door middel van curriculumontwerp en feedbackgeletterdheid.