The Architecture of Educational Measurement: A Multi-Country Policy Analysis and Mathematical Simulation of a Hybrid Phase- and Outcome-Based Marks Distribution Model

Nel mondo dell'istruzione superiore, in particolare nei campi in cui gli studenti si addestrano ad assistere le persone, esiste da tempo una tensione tra il modo in cui le scuole contano il tempo e il modo in cui misurano le competenze. Per decenni, le università si sono affidate a un sistema basato sulle ore di credito, un metodo che consiste essenzialmente nel tracciare quante ore uno studente trascorre seduto in un'aula o in un laboratorio. Questo approccio è eccellente per i compiti amministrativi, come il trasferimento dei crediti tra scuole o il calcolo delle tasse scolastiche, ma spesso non riesce a catturare la vera profondità dell'apprendimento di uno studente. Tratta uno studente che ha trascorso del tempo seduto allo stesso modo di uno che ha realmente padroneggiato un concetto difficile. Negli ultimi anni, gli educatori si sono spostati verso modelli basati sui "risultati" (outcomes-based), che si concentrano su ciò che uno studente è effettivamente in grado di fare alla fine di un corso. Tuttavia, anche questi sistemi moderni faticano spesso ad adattarsi quando gli studenti passano dalla teoria di base alla pratica complessa nel mondo reale. Spesso applicano le stesse regole e pesi sia a un principiante che a un futuro esperto, il che può oscurare se uno studente sia davvero pronto per le responsabilità della propria professione.

Questa sfida è al centro di un nuovo studio condotto da ricercatori dell'Università di Najran, che propone un modo più sfumato di valutare gli studenti. Il team, guidato da Siraj DAA Khan, ha indagato se un sistema ibrido potesse riflettere meglio il percorso di uno studente da apprendista in aula a professionista competente. Si sono concentrati su un gruppo specifico di studenti in formazione in odontoiatria pediatrica, un campo in cui la posta in gioco è alta e la transizione dalla pratica sui modelli al trattamento di bambini reali deve essere gestita con estrema cura. I ricercatori hanno analizzato i dati di 119 studenti attraverso tre fasi distinte della loro formazione: una fase preclinica in cui lavoravano su manichini, una fase clinica in cui iniziavano l'assistenza ai pazienti sotto supervisione, e una fase avanzata in cui gestivano casi complessi in autonomia. Confrontando il loro nuovo modello di valutazione flessibile con il sistema tradizionale fisso utilizzato dall'università, hanno cercato di vedere se un approccio dinamico potesse convalidare in modo più accurato la prontezza degli studenti al diploma.

Il metodo tradizionale utilizzato dall'università, e da molte altre, applica una formula statica a tutti i voti. In questo vecchio sistema, gli esami scritti e le conoscenze teoriche costituiscono costantemente il 60% del voto finale dello studente, mentre le abilità pratiche e le prestazioni cliniche costituiscono il restante 40%, indipendentemente dall'anno di corso dello studente. I ricercatori hanno sostenuto che questo approccio "taglia unica" è difettoso perché non corrisponde alle esigenze mutevoli dell'apprendista. Nelle prime fasi, la comprensione della teoria è fondamentale per la sicurezza, ma man mano che gli studenti avanzano, la loro capacità di eseguire procedure e gestire i pazienti dovrebbe diventare il fulcro principale della loro valutazione. Per testare questo, il team ha progettato un nuovo quadro matematico che sposta il peso di questi componenti man mano che gli studenti progrediscono. In questo nuovo modello, l'importanza relativa della conoscenza scritta diminuisce negli anni successivi, mentre il peso attribuito alle abilità pratiche aumenta, assicurando che il voto finale rifletta le specifiche richieste di quella fase della formazione.

Quando i ricercatori hanno applicato questo nuovo sistema ai record storici dei 119 studenti, i risultati hanno rivelato differenze significative nel modo in cui gli studenti venivano valutati. Nella fase più precoce della formazione, nota come livello preclinico, il nuovo modello ha effettivamente abbassato i punteggi medi degli studenti. Il voto medio è sceso dall'82,59% del vecchio sistema all'81,82% del nuovo. Questo non era un segno di fallimento, ma piuttosto una correzione deliberata. Il vecchio sistema aveva permesso agli studenti di ottenere voti alti basati sulle loro prestazioni in compiti manuali di laboratorio, il che mascherava le debolezze nella comprensione teorica. Il nuovo modello, mantenendo un alto peso cognitivo (60%) in questa fase fondamentale, ha garantito che gli studenti non potessero superare l'esame senza una solida comprensione della scienza dietro le procedure, rivelando così una teoria più debole che era stata precedentemente nascosta e proteggendo la sicurezza del paziente prima ancora che toccassero un paziente reale.

Man mano che gli studenti passavano alle fasi clinica e avanzata della loro formazione, l'effetto del nuovo modello si invertiva. Per gli studenti nel loro tirocinio di specialità clinica, il voto medio è salito dal 79,77% all'80,19%. Per quelli nella fase finale di cura completa, l'aumento è stato ancora più pronunciato, passando dal 79,62% all'80,94%. Questi aumenti si sono verificati perché il nuovo sistema ha regolato la ponderazione per dare maggiore rilievo alle abilità pratiche e al processo decisionale autonomo, che erano stati precedentemente limitati dalla rigida dominanza degli esami scritti nel modello tradizionale. I dati hanno mostrato che il sistema tradizionale aveva soppresso i punteggi degli studenti che eccellevano nella pratica reale semplicemente perché i loro punteggi nei test scritti non erano perfetti. Il nuovo quadro ha permesso alla loro eccellenza pratica di risaltare, fornendo un quadro più accurato della loro prontezza a esercitare la professione in modo indipendente.

Lo studio ha anche guardato oltre una singola università per capire come questo approccio si inserisca nel panorama globale dell'istruzione. I ricercatori hanno esaminato le politiche e i quadri di riferimento di nove diversi paesi e regioni, inclusi Stati Uniti, Regno Unito, Australia e Arabia Saudita. Hanno scoperto che, sebbene molti di questi luoghi si siano ufficialmente spostati verso un'educazione basata sui risultati, i sistemi di valutazione effettivamente in uso rimangono spesso rigidi e scollegati dalla natura progressiva dell'apprendimento. Il nuovo modello ibrido si allinea strettamente con gli standard stabiliti dai principali organismi di accreditamento, come la Commissione per la Valutazione dell'Istruzione e della Formazione in Arabia Saudita, che richiedono che le valutazioni evolvano insieme allo sviluppo dello studente. Integrando il carico di lavoro, i risultati di apprendimento specifici e la fase del curriculum in un unico sistema coerente, i ricercatori hanno dimostrato che è possibile creare una struttura di valutazione che sia al contempo equa e scientificamente fondata.

In definitiva, questa ricerca suggerisce che il modo in cui misuriamo il successo degli studenti deve essere dinamico quanto il processo di apprendimento stesso. Lo studio conferma che un registro statico dei voti basato sul tempo è insufficiente per catturare la complessa crescita di un futuro professionista sanitario. Spostando l'attenzione da un insieme fisso di regole a un sistema flessibile che si adatta alla fase di sviluppo dello studente, gli educatori possono garantire che un voto finale sia una vera validazione della competenza. Le conclusioni indicano che questo approccio non solo migliora l'accuratezza della valutazione, ma aumenta anche la trasparenza, rendendo chiaro agli studenti esattamente cosa ci si aspetta da loro in ogni fase del loro percorso. Per gli studenti oggetto dello studio, e potenzialmente per altri nelle professioni sanitarie in tutto il mondo, ciò significa che il loro voto finale non sarà più solo un numero su una trascrizione, ma un riflesso affidabile della loro capacità di assistere i pazienti in modo sicuro ed efficace.