📄 medicine

Measuring What Future Physicians Know About Contraception: Development and Validation of the Clinical Contraceptive Knowledge Test (CCKT) in Vietnam Using Item Response Theory

Deze studie heeft de 18-items klinische anticonceptie-kennis-test (CCKT-18) ontwikkeld en gevalideerd met behulp van Item Response Theory onder Vietnamese medische studenten, waarmee werd aangetoond dat het een robuust, eendimensionaal en precies instrument is voor het beoordelen van anticonceptiekennis en het begeleiden van curriculumverbeteringen.

Oorspronkelijke auteurs: Nguyen Dinh Ky, Nguyen Quynh Anh, Nguyen Ngoc Minh, Pham The Lam, Do Hoa Cham, To Khanh Linh, Nguyen Dang Linh Chi, Pham Hong Anh, Nguyen Thi Hong Hanh, Nguyen Tien Thang, Nguyen Thi Huyen Anh, Nguyen

Gepubliceerd 2026-07-08

📖 5 min leestijd🧠 Diepgaand

CC BY 4.0

Oorspronkelijke auteurs: Nguyen Dinh Ky, Nguyen Quynh Anh, Nguyen Ngoc Minh, Pham The Lam, Do Hoa Cham, To Khanh Linh, Nguyen Dang Linh Chi, Pham Hong Anh, Nguyen Thi Hong Hanh, Nguyen Tien Thang, Nguyen Thi Huyen Anh, Nguyen Manh Thang

Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). ✨ Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer

Stel je voor dat je probeert te meten hoe goed een groep toekomstige artsen op de hoogte is van anticonceptie. In het verleden gebruikten onderzoekers een "liniaal" die een beetje defect was. Het behandelde elke vraag alsof deze even belangrijk was, en het gaf je slechts één getal (zoals een testscore van 100) zonder te vertellen wat de student eigenlijk wist of waar zij moeite mee hadden. Het was alsof je de hoogte van een gebergte probeerde te meten met één enkele, platte meetlint; je krijgt een getal, maar je mist de pieken en dalen.

Dit artikel beschrijft de creatie van een gloednieuwe, hoogtechnologische "laser scanner" genaamd de Clinical Contraceptive Knowledge Test (CCKT-18). Hier is hoe de onderzoekers dit instrument hebben gebouwd en wat ze hebben ontdekt, met behulp van eenvoudige analogieën.

1. Het Probleem: De oude liniaal was niet genoeg

De onderzoekers merkten op dat medische studenten in Vietnam (en wereldwijd) vaak goede cijfers halen op school, maar nog steeds een tekort aan praktische kennis hebben om patiënten te adviseren over anticonceptie. De oude tests die zij gebruikten, waren gebaseerd op de "Klassieke Testtheorie".

De Analogie: Denk aan de oude test als een zak knikkers waarbij elke knikker even groot is. Als je ze telt, weet je hoeveel je er hebt, maar je weet niet of sommige zwaar en andere licht zijn. De oude test nam aan dat elke vraag even moeilijk en even belangrijk was.
Het Doel: Ze wilden een instrument dat de moeilijkheidsgraad van elke vraag kon meten en hoe goed een vraag het verschil kon zien tussen een "wetende" en iemand die aan het gokken is.

2. Het Bouwen van het Nieuwe Instrument: Een Vierstapsconstructie

Het team heeft de test niet zomaar geschreven en gehoopt op het beste. Ze bouwden de test in vier zorgvuldige fasen, zoals het bouwen van een stevige brug:

Fase 1: Het verzamelen van de stenen (Itemgeneratie): Ze bekeken wereldwijde gezondheidsrichtlijnen (van de WHO) en onderwijstheorieën om 27 initiële vragen te schrijven. Deze vragen dekten alles af, van basisfeiten tot complexe klinische beslissingen.
Fase 2: De kwaliteitscontrole (Expertbeoordeling): Zes experts op het gebied van reproductieve gezondheid en educatie bekeken de vragen. Zij fungeerden als strikte redacteuren, waarbij ze één vraag die niet paste verwijderden en twee andere bijpolijstden totdat ze perfect waren. Dit liet 26 vragen over.
Fase 3: De stresstest (Pilotstudie): Ze testten de 26-vragen test op een kleine groep van 100 studenten. Het werkte goed, maar ze wilden het nog scherper maken.
Fase 4: De hoogtechnologische scan (Grootschalige validatie): Ze lieten de test afnemen door meer dan 700 medische studenten aan vijf universiteiten in Vietnam. Ze gebruikten een geavanceerde wiskundige methode genaamd Item Response Theory (IRT).
- De Analogie: Als de oude methode een simpele weegschaal was, dan is IRT als een 3D-printer die de vorm van elk stuk data analyseert. Het kijkt naar hoe moeilijk elke vraag is en hoe goed het onderscheid maakt tussen studenten die de stof echt kennen en studenten die gewoon aan het gokken zijn.

3. Het Resultaat: De CCKT-18

Na het analyseren van de gegevens realiseerden de onderzoekers zich dat ze niet alle 26 vragen nodig hadden. Sommige vragen waren redundant (ze vroegen hetzelfde op een andere manier) of deden niet goed hun werk om studenten van elkaar te onderscheiden.

De Snoei: Ze brachten de test terug naar 18 vragen.
De Vorm: Ze verwachtten dat de test drie verschillende vaardigheden zou meten (het onthouden van feiten, het begrijpen van concepten en het toepassen van regels). Echter, de wiskunde toonde aan dat voor deze studenten al deze vaardigheden zo nauw met elkaar verbonden waren, dat ze fungeerden als één enkele supervaardigheid. Daarom hielden ze de test aan als één enkel, verenigd onderdeel.
De Prestatie: De nieuwe 18-vragen test (CCKT-18) is zeer precies. Het kan het kennisniveau van een student accuraat meten, of het nu gaat om een beginner of een gevorderde leerling. Het is als een camera met een perfecte zoomlens die op elke afstand scherp blijft.

4. Wat de Test Onthulde

Toen ze deze nieuwe "laser scanner" op de studenten gebruikten, ontdekten ze een paar interessante zaken:

Eerlijkheid: De test werkte precies hetzelfde voor mannelijke en vrouwelijke studenten. Niemand werd door de vragen onrechtvaardig bevoordeeld of benadeeld.
De Leercurve: De test toonde aan dat studenten over het algemeen goed waren in het "makkelijke" deel (basisfeiten), maar meer moeite hadden met het "moeilijke" deel (het toepassen van richtlijnen op complexe, reële situaties).
De "Klinische" Kloof: De test merkte op dat studenten die al begonnen waren aan hun klinische rotaties (werken in ziekenhuizen), bepaalde lastige vragen beter beantwoordden dan zij die dat nog niet hadden gedaan. Dit suggereert dat de test goed is in het opsporen van wie daadwerkelijk de praktische vaardigheden heeft geleerd versus wie alleen de tekstboekstof heeft uit het hoofd geleerd.

5. Waarom dit Belangrijk Is (Volgens het Artikel)

Het artikel concludeert dat de CCKT-18 een valide, betrouwbaar en robuust instrument is.

De Analogie: Voorheen probeerden onderwijzers te raden hoeveel water er in een emmer zat door naar de kleur van het water te kijken. Nu hebben ze een nauwkeurige maatbeker.
Het Voordeel: Omdat de test zo precies is, kan het onderwijzers exact vertellen waar de hiaten in de kennis zitten. In plaats van te zeggen: "De klas moet meer studeren," kunnen ze zeggen: "De klas is geweldig in het onthouden van feiten, maar ze hebben meer oefening nodig in het toepassen van die feiten op echte patiënten."

Belangrijke Opmerking: Het artikel richt zich strikt op het creëren en valideren van dit meetinstrument. Het beweert niet dat het probleem al is opgelost, noch zegt het precies hoe scholen hun lessen moeten aanpassen op basis van deze resultaten. Het biedt simpelweg de hoogwaardige "liniaal" die nodig is om het probleem nauwkeurig te meten, zodat toekomstig werk kan beginnen.

Technische Samenvatting: Ontwikkeling en Validatie van de Clinical Contraceptive Knowledge Test (CCKT)

Probleemstelling
De nauwkeurige beoordeling van kennis over anticonceptie onder medische studenten wordt belemmerd door de beperkingen van traditionele evaluatie-instrumenten. Bestaande instrumenten, zoals de Contraceptive Knowledge Assessment (CKA), vertrouwen op de Klassieke Testtheorie (CTT), die ruwe scores aggregeert onder de aanname van gelijke itemweging. Deze aanpak slaagt er niet in een precieze maatstaf te bieden voor latente klinische competentie en kan de moeilijkheid en discriminatie van items niet onafhankelijk schatten. Bovendien is er een gebrek aan gevalideerde, op Itemrespons-theorie (IRT) gebaseerde instrumenten voor het beoordelen van kennis over anticonceptie in Vietnam of internationaal, ondanks de kritieke noodzaak om educatieve hiaten te kwantificeren om curriculumhervorming te informeren. Gezien het feit dat Vietnam te maken heeft met hoge percentages onbedoelde zwangerschappen en abortussen, en dat medische studenten vaak een gebrek hebben aan praktische kennis van moderne anticonceptie en de WHO Medical Eligibility Criteria (MEC), is een robuuster psychometrisch instrument vereist.

Methodologie
Deze studie maakte gebruik van een transversaal, multicenter ontwerp waarbij bachelorstudenten geneeskunde van vijf universiteiten in Vietnam werden betrokken. De ontwikkeling en validatie van de Clinical Contraceptive Knowledge Test (CCKT) volgde een rigoureus vierfasen sequentieel kader:

Itemgeneratie: Een initiële schaal van 27 items werd geconstrueerd op basis van WHO-richtlijnen en in kaart gebracht volgens de herziene Taxonomie van Bloom (Herinneren, Begrijpen, Toepassen). Items maakten gebruik van een 'Waar/Onwaar/Ik weet het niet'-formaat om gokken te minimaliseren.
Expertbeoordeling: Een panel van zes specialisten beoordeelde de inhoudelijke validiteit met behulp van de Item-Level Content Validity Index (I-CVI) en de Scale-Level Content Validity Index (S-CVI/Ave). Deze fase resulteerde in de verwijdering van één item en de revisie van twee items, wat leidde tot een instrument van 26 items.
Pilotstudie: Een pilotstudie (n=100) maakte gebruik van CTT om te screenen op itemgemak, discriminatie en interne consistentie (KR-20 = 0,854).
Grootschalige Validatie: De hoofdstudie rekruteerde 723 studenten, waarvan er 636 werden behouden voor analyse na uitsluiting van ongeldige reacties. De onderzoekers pasten een twee-parameters logistisch (2PL) IRT-model toe.
- Dimensionaliteit: Parallelle analyse en scree-plots werden gebruikt om het aantal latente factoren te bepalen.
- Modelselectie: Zeven concurrerende modellen (variërend van unidimensionale tot multidimensionale 2PL en MIRT-specificaties) werden geëvalueerd met behulp van fit-indices (CFI, TLI, RMSEA, SRMR). Het principe van parsimonie leidde tot de selectie van het uiteindelijke model.
- Itemreductie: Items werden iteratief verwijderd op basis van lage discriminatie ( $a < 0,80$ ), lokale afhankelijkheid ( $|Q3| > 0,20$ ), of mismatch ( $S-X^2, p < 0,05$ ).
- Validatiecontroles: Differential Item Functioning (DIF) werd getest over geslacht en trainingsfasen. Gevoeligheidsanalyses werden uitgevoerd met een "strict-clean" dataset (n=545) om de robuustheid van het model te waarborgen.

Belangrijkste Resultaten

Instrumentverfijning: Het proces reduceerde de initiële 26 items tot een definitief instrument van 18 items (CCKT-18).
Structurele Validiteit: Hoewel exploratieve analyses duidden op potentiële multidimensionaliteit, ondersteunde de empirische evaluatie een unidimensionale structuur. Het unidimensionale 2PL-model (Model 7) vertoonde uitstekende fit-indices (CFI = 0,983, TLI = 0,980, RMSEA = 0,036, SRMR = 0,039), vergelijkbaar met complexere multidimensionale modellen. Inter-factorcorrelaties in multidimensionale modellen waren extremer hoog ( $r > 0,80$ ), wat wijst op een enkele dominante latente eigenschap.
Itemparameters: De definitieve items vertoonden discriminatieparameters variërend van 0,687 tot 2,374 en moeilijkheidsparameters van -3,86 tot 1,08.
Betrouwbaarheid en Precisie: De schaal vertoonde een hoge meetprecisie met een marginale betrouwbaarheid van 0,844. De Test Information Function (TIF) piekte bij $\theta = 0,462$ , wat een hoge precisie (betrouwbaarheid $\ge 0,80$ ) bood over het bereik van bekwaamheid van -0,784 tot +1,51.
DIF-analyse: Er werd geen significante DIF gevonden over geslacht, wat de meetinvariantie bevestigt. Echter, vier items vertoonden significante DIF over trainingsfasen (preklinisch versus klinisch), specifiek met betrekking tot klinische besluitvormingscompetenties (bijv. keuze voor IUD, beheer van gemiste pil), wat reflecties zijn van verschillen in curriculumblootstelling in plaats van bias.
Robuustheid: Gevoeligheidsanalyses bevestigden de structurele stabiliteit, met verwaarloosbare veranderingen in de model-fit ( $\Delta CFI = 0,003$ ) en itemparameters tussen de hoofd- en de "strict-clean" datasets.

Betekenis en Claims
De auteurs beweren dat de CCKT-18 een valide, betrouwbaar en robuust instrument is voor het beoordelen van de kennis over anticonceptie onder medische studenten. De primaire betekenis ligt in de methodologische vooruitgang ten opzichte van legacy-tools:

Precisie: Door gebruik te maken van IRT, gaat de CCKT-18 verder dan ruwe scores om een precieze, competentiegerichte evaluatie van latente bekwaamheid te bieden, waardoor onderwijzers specifieke curriculaire tekortkomingen kunnen identificeren (bijv. hiaten in hogere-orde toepassingsvaardigheden) in plaats van alleen algemene kennisniveaus.
Educatief Nut: Het instrument ondersteunt een verschuiving van traditionele scoregebaseerde beoordeling naar competentiegebaseerde evaluatie, in lijn met kaders die de nadruk leggen op klinisch redeneren.
Globale Context: De studie bevestigt internationale bevindingen dat medische studenten vaak een gebrek hebben aan praktische toepassingsvaardigheden ondanks sterke theoretische kennis, maar biedt een gestandaardiseerd, psychometrisch rigoureus sjabloon voor grensoverschrijdende beoordeling.
Toekomstige Toepassing: Binnen het bredere V-COC Study-kader is de CCKT-18 gepositioneerd als een fundamenteel instrument voor landelijke enquêtes om het landschap van kennis over anticonceptie in Vietnam te karakteriseren, met als doel gerichte curriculumhervormingen in reproductieve gezondheidseducatie aan te drijven.

De auteurs erkennen beperkingen, waaronder het gebruik van gemaksprovencering (convenience sampling), het transversale ontwerp en de concentratie van itemgemak in het matige bereik, wat de discriminatie op de hoogste bekwaamheidsniveaus kan beperken. Zij merken op dat toekomstig werk longitudinale studies en criteria-gerelateerde validiteitsbeoordelingen moet bevatten.