Psychometric Validation of the Education and Assessment of Genetic Literacy (EAGL) Measure

Deze studie valideert psychometrisch de maatstaf voor Onderwijs en Beoordeling van Genetische Geletterdheid (EAGL) in een grote Amerikaanse steekproef, bevestigt haar meer-domeinstructuur en onthult significante interacties tussen onderwijs, persoonlijke connectie met autisme en kennisbegrip, terwijl er geen geografische dispariteiten worden gevonden.

De kern

Stel je voor dat "genetische geletterdheid" een kaart is van hoe goed mensen de complexe instructies begrijpen waaruit het leven bestaat (ons DNA). Al lang hebben de kaarten die wetenschappers hebben gebruikt om dit begrip te meten, gaten: ze toetsten niet of mensen de concepten werkelijk begrepen, en ze waren niet grondig gecontroleerd om te zien of ze accuraat of betrouwbaar waren.

Dit artikel gaat over het bouwen en testen van een gloednieuwe, hoogwaardige kaart genaamd de EAGL (Education and Assessment of Genetic Literacy).

Hier is hoe de onderzoekers deze nieuwe kaart hebben gebouwd en getest:

1. Het Blauwdruk en de Proefrit
Het team nam een groep van 2.708 mensen uit de hele VS en vroeg hen om de EAGL-test te doen. Denk aan deze test als een meersporige snelweg met drie verschillende banen:

• Baan 1 (Subjectieve Kennis): Mensen vragen: "Hoe zelfverzekerd voel je je over je kennis van genetica?"
• Baan 2 (Objectieve Kennis): Mensen vragen: "Kun je deze specifieke feiten daadwerkelijk correct beantwoorden?"
• Baan 3 (Kennisbegrip): Dit is de nieuwe, speciale baan. In plaats van alleen feiten uit het hoofd te leren, vraagt het mensen om uit te leggen hoe complexe aandoeningen werken. Om dit te testen, gebruikten ze autisme als een specifiek voorbeeld, waarbij ze het behandelden als een complex puzzel in plaats van een simpel feit.

2. Wat de Test Onthulde
Toen de onderzoekers naar de resultaten keken, vonden ze interessante patronen, zoals het vinden van verborgen oriëntatiepunten op hun kaart:

• De "Autisme"-Connectie: Mensen die een persoonlijke connectie hadden met autisme (zoals een familielid met de aandoening) waren veel zelfverzekerder in hun kennis (Baan 1). Deze zelfverzekerdheid betekende echter niet noodzakelijkerwijs dat ze meer feiten wisten (Baan 2). Dit bevestigde een bekend fenomeen: mensen voelen zich vaak dat ze meer over een onderwerp weten wanneer het hun persoonlijke leven raakt, zelfs als hun feitelijke kennis niet beter is.
• De Interactie met Onderwijs: Bij het bekijken van hoe goed mensen het complexe "autisme-puzzel" begrepen (Baan 3), hingen de resultaten af van een combinatie van hun opleidingsniveau en hun persoonlijke connectie met autisme. Het was niet het een of het ander; de twee factoren werkten samen als tandwielen in een machine om het begrip te beïnvloeden.
• Stad versus Platteland: De onderzoekers vroegen zich af of het wonen in een grote stad versus een klein dorp invloed had op hoeveel mensen wisten. Ze ontdekten dat, verrassend genoeg, het er niet toe deed. Of je nu in een metropool of op het platteland woonde, je algehele niveaus van genetische geletterdheid waren ongeveer hetzelfde.

3. Het Eindproduct
Na het uitvoeren van deze controles (met behulp van statistische hulpmiddelen genaamd factoranalyse om ervoor te zorgen dat de kaart accuraat was), bevestigden de onderzoekers dat de EAGL werkt. Ze hebben nu twee versies van deze nieuwe kaart beschikbaar voor iedereen om te gebruiken:

• De EAGL-lang: Een gedetailleerde, meersporige versie die al is getest op duizenden mensen.
• De EAGL-kort: Een gestroomlijnde, driebaansversie die even accuraat is maar sneller te doen is.

Kortom, dit artikel heeft niet alleen een nieuwe test gemaakt; het heeft bewezen dat de test een betrouwbaar hulpmiddel is om te meten hoe goed de maatschappij de complexe wereld van de genetica begrijpt, met name met de nadruk dat het begrijpen van complexe aandoeningen meer vereist dan alleen het uit het hoofd leren van feiten.

Technische samenvatting

Technische Samenvatting: Psychometrische Validatie van de Maatregel voor Onderwijs en Beoordeling van Genetische Geletterdheid (EAGL)

Probleemstelling
Genetische geletterdheid is een cruciale maatstaf voor het begrijpen van de betrokkenheid van de samenleving bij genetische wetenschap. Echter, bestaande veelgebruikte maatregelen lijden onder twee primaire beperkingen: ze missen vaak specifieke beoordelingen van kennisbegrip en ze ontberen vaak een strikte psychometrische validatie. Deze lacune belemmert de nauwkeurige meting van hoe individuen complexe genetische concepten werkelijk begrijpen.

Methodologie
Om deze tekortkomingen aan te pakken, voerden de auteurs een psychometrische validatie uit van de maatregel voor Onderwijs en Beoordeling van Genetische Geletterdheid (EAGL). De studie gebruikte een grote steekproef van 2.708 deelnemers uit de Verenigde Staten. Het validatieproces hanteerde zowel een Exploratoire Factoranalyse (EFA) als een Confirmatoire Factoranalyse (CFA) om de structurele integriteit van het instrument te toetsen.

Het EAGL-instrument was ontworpen om standaard subjectieve en objectieve kennissubscales te omvatten, naast een onderscheiden subscale voor "kennisbegrip". Deze unieke subscale maakt specifiek gebruik van autisme als casestudie voor een complexe genetische aandoening om de diepte van het begrip te beoordelen. De onderzoekers onderzochten verder demografische en contextuele variabelen, waaronder opleidingsniveau, persoonlijke connectie met autisme en geografische locatie (metropolitane versus niet-metropolitane status), en gebruikten regressieanalyses om hun relaties met scores voor genetische geletterdheid te onderzoeken.

Belangrijkste Resultaten
De analyse leverde verschillende statistisch significante bevindingen op:

• Interactie-effecten: Er werd een significant interactie-effect waargenomen tussen opleidingsniveau en persoonlijke connectie met autisme met betrekking tot kennisbegrip ($F=3,68, p=0,003$).
• Kloof tussen Subjectief en Objectief: Deelnemers met een persoonlijke connectie met autisme scoorden significant hoger op het subjectieve kennisgedeelte ($F=19,52, p<0,001$) in vergelijking met diegenen zonder een dergelijke connectie. Deze verhoging werd echter niet waargenomen in het objectieve kennisgedeelte, waardoor eerdere demonstraties van een kloof tussen subjectieve en objectieve kennis in wetenschappelijke geletterdheid worden bevestigd.
• Geografische Factoren: De studie vond geen significante hoofdeffecten van metropolitane versus niet-metropolitane status op de algehele niveaus van genetische geletterdheid.

Bijdragen en Betekenis
De primaire bijdrage van dit werk is de succesvolle validatie van de EAGL-maatregel, die nu twee onderscheiden, multidomein-instrumenten biedt die beschikbaar zijn voor brede toepassing:

1. EAGL-lang: Een uitgebreide, veelzijdige maatregel die eerder is getest bij duizenden deelnemers.
2. EAGL-kort: Een gevalideerde versie met drie factoren, afgeleid uit de huidige studie.

Het artikel stelt dat deze instrumenten het construct van genetische geletterdheid nauwkeurig vastleggen, en specifiek de eerdere afwezigheid van maatregelen voor kennisbegrip en psychometrische strengheid aanpakken. Door gevalideerde instrumenten te bieden die onderscheid maken tussen subjectief vertrouwen en objectief begrip, maakt de studie een nauwkeurigere onderzoking mogelijk van de interactie van de samenleving met genetica.