Assessing Problem-Solving in HR Contexts: A Comparison Between Game-Based and Self-Report Measures

Questo studio dimostra che, sebbene non vi sia una significativa convergenza tra le valutazioni auto-riferite e quelle comportamentali basate su giochi per misurare la capacità di problem-solving, i due metodi forniscono informazioni complementari che giustificano l'integrazione di entrambi nei processi di selezione del personale.

L'essenziale

🎮 La Sfida: "Cosa pensi di essere" vs. "Cosa fai davvero"

Immagina di voler assumere un nuovo chef per il tuo ristorante. Hai due modi per capire se è bravo:

1. Gli chiedi: "Secondo te, quanto sei bravo a cucinare?" (Questo è il test auto-riferito).
2. Gli dai gli ingredienti: "Ecco un'ora di tempo, cucina un piatto delizioso" (Questo è il gioco basato su comportamenti).

Questo studio italiano si è chiesto: Se una persona dice di essere un "super-cuoco" nel questionario, lo dimostra davvero quando è al fornello?

🔍 Cosa hanno fatto gli studiosi?

I ricercatori hanno preso 72 studenti universitari e li hanno messi alla prova con due strumenti diversi per misurare la capacità di risolvere problemi (una delle abilità più richieste oggi nel lavoro):

1. Il Questionario (PSI-B): Hanno chiesto agli studenti di compilare un sondaggio dove dovevano dire quanto erano d'accordo con frasi tipo: "Di solito riesco a trovare soluzioni intelligenti ai miei problemi". È come chiedere a qualcuno: "Quanto ti senti un genio?".
2. Il Videogioco (Behaveme-PS): Hanno fatto giocare gli studenti per 5 minuti a un gioco digitale. Non era un gioco per divertirsi, ma una sfida mentale (un po' come un puzzle complesso o il "Torre di Hanoi") dove dovevano riorganizzare elementi sotto pressione di tempo. Il computer ha osservato cosa facevano davvero: quanti errori facevano, quanto velocemente pensavano, se avevano un piano o se procedevano a caso.

📉 Il Risultato Sorprendente: "Nessuna Corrispondenza"

Il risultato è stato scioccante per molti: non c'era quasi nessun legame tra le due cose.

• C'erano studenti che nel questionario dicevano: "Sono un genio della risoluzione problemi!" (punteggio altissimo), ma nel gioco si sono bloccati, hanno fatto errori e non hanno trovato la soluzione.
• C'erano studenti che nel questionario dicevano: "Non sono molto sicuro di me, faccio fatica" (punteggio basso), ma nel gioco hanno dimostrato di essere rapidi, strategici e molto bravi a risolvere il puzzle.

L'analogia della "Mappa e del Territorio":
Pensa al questionario come a una mappa disegnata da qualcuno che descrive come crede di muoversi nella città. Pensa al gioco come al viaggio reale per strada.
Lo studio ha scoperto che la mappa (ciò che dici di fare) e il viaggio reale (ciò che fai) spesso non coincidono. Chi ha una mappa perfetta nella testa può perdersi nella realtà, e chi ha una mappa confusa nella testa potrebbe trovare scorciatoie geniali mentre guida.

💡 Perché succede questo?

Gli autori spiegano che non è un errore del gioco o del questionario, ma che misurano due cose diverse:

1. La "Percezione" (Questionario): Misura la tua fiducia e la tua autostima. È come se chiedessimo: "Quanto ti senti coraggioso?".
2. Il "Comportamento" (Gioco): Misura la tua azione reale sotto stress. È come se ti mettessimo in una tempesta vera e vedessimo se sai nuotare.

Nel mondo reale, molte persone hanno una bassa autostima ma ottime capacità pratiche. Altre hanno un'alta autostima (spesso ingiustificata) ma scarse capacità quando devono agire velocemente.

🚀 Cosa significa per le aziende e i recruiter?

Questa ricerca ci dà un consiglio d'oro per il futuro del lavoro:

• Non fidarti solo di una cosa: Se un'azienda si basa solo sui colloqui o sui questionari ("Dimmi quanto sei bravo"), rischia di assumere persone che pensano di essere brave ma non lo sono, o di scartare persone timide che invece sono geniali.
• Usa entrambi gli strumenti: L'ideale è usare sia il questionario (per capire la personalità e la fiducia) E un gioco o una simulazione pratica (per vedere come agisci davvero).
• Il gioco non è un "gioco": I videogiochi usati per il lavoro non sono solo divertimento; sono finestre reali su come il tuo cervello lavora quando sei sotto pressione, senza che tu possa "fingere" di essere bravo come faresti in un colloquio.

In sintesi

Questo studio ci insegna che ciò che dici di essere e ciò che fai sono due mondi diversi. Per trovare i veri talenti, le aziende non dovrebbero chiedere solo "Quanto sei bravo?", ma dovrebbero metterti alla prova in una situazione reale (come un gioco) per vedere cosa sai fare quando non hai tempo di pensare a cosa dire.

È come dire: non chiedermi se sai nuotare, gettami in piscina e guardami nuotare.

Sommario tecnico

Titolo dello Studio

Valutazione del Problem-Solving in Contesti HR: Un Confronto tra Misure Basate su Giochi e Auto-Report

1. Il Problema di Ricerca

Il mercato del lavoro attuale richiede sempre più competenze trasversali (soft skills), in particolare il problem-solving, che è dinamico, processuale e dipendente dal contesto.

• Limiti degli strumenti tradizionali: I metodi di selezione convenzionali, come i questionari di auto-valutazione (es. Problem Solving Inventory - PSI), soffrono di bias noti: desiderabilità sociale, distorsione delle risposte, ansia da test e una scarsa validità ecologica. Questi strumenti misurano la percezione di sé e le credenze stabili, non il comportamento reale in situazioni complesse.
• Il gap empirico: Sebbene le Game-Based Assessments (GBA) siano sempre più adottate per la loro capacità di catturare dati comportamentali osservabili in tempo reale, manca evidenza empirica diretta che confronti gli indicatori comportamentali derivati dai giochi con le misure psicometriche tradizionali. Non è chiaro se queste due modalità misurino lo stesso costrutto sottostante o facce distinte della competenza.

2. Metodologia

Lo studio ha adottato un approccio di confronto tra metodi (method-comparison) su un campione di 72 partecipanti (studenti universitari di informatica).

• Strumenti Utilizzati:
  1. PSI-B (Problem Solving Inventory): Un questionario di auto-report validato che misura le credenze, la fiducia e le strategie di coping percepite dai partecipanti. I punteggi sono stati categorizzati in quattro livelli (Base, Medio, Alto, Molto Alto) basati sui quartili.
  2. Behaveme-PS (GBA): Un compito di gioco basato su 5 minuti, sviluppato da Emaze Gaming. Il gioco simula richieste cognitive reali (ispirato a Raven's Progressive Matrices e Tower of Hanoi) dove i partecipanti devono riorganizzare elementi sotto pressione temporale.
• Procedura:
  • I partecipanti hanno completato prima il PSI-B sotto supervisione psicologica.
  • Successivamente, hanno svolto la sessione di 5 minuti su Behaveme-PS.
  • Il sistema ha catturato indicatori comportamentali oggettivi: numero di combinazioni valide, numero totale di mosse e tempo medio per combinazione.
  • La piattaforma ha classificato la performance comportamentale in quattro livelli (Base, Medio, Avanzato, Molto Avanzato).
• Analisi Statistica:
  • Calcolo della correlazione di Spearman (adatta per variabili ordinali) per verificare l'associazione tra i quartili del PSI-B e i livelli di Behaveme.
  • Analisi di una tabella di contingenza e box plot per esaminare la distribuzione della performance comportamentale attraverso i livelli di auto-percezione.

3. Risultati Chiave

I risultati hanno rivelato una mancanza significativa di convergenza tra le due modalità di misurazione.

• Assenza di Correlazione: L'analisi di correlazione di Spearman non ha mostrato alcuna associazione significativa tra i punteggi di auto-report (PSI-B) e i livelli di performance comportamentale (Behaveme-PS) ($\rho = -0.09$, $p = 0.45$).
• Eterogeneità Intracategoriale: L'analisi della tabella di contingenza ha mostrato una variabilità sostanziale:
  • I partecipanti classificati come "Molto Alto" nel PSI-B non hanno necessariamente ottenuto performance elevate nel gioco; molti si sono distribuiti su livelli comportamentali inferiori.
  • Viceversa, partecipanti con auto-percezione media o alta nel PSI-B hanno spesso dimostrato performance comportamentali "Avanzate" o "Molto Avanzate" nel gioco.
  • Anche il gruppo con auto-percezione "Base" nel PSI-B ha mostrato performance comportamentali variabili, spesso superiori alle aspettative.

4. Contributi Principali

Lo studio offre diversi contributi teorici e pratici al campo della selezione del personale e della psicologia organizzativa:

1. Distinzione tra Competenza Percepita e Comportamento Eseguito: Dimostra che l'auto-percezione della capacità di problem-solving e l'effettiva esecuzione comportamentale in un contesto strutturato e sotto pressione catturano facce distinte dello stesso costrutto, non indicatori intercambiabili.
2. Validazione del Ruolo Complementare delle GBA: I risultati suggeriscono che le GBA non devono essere viste come sostituti dei questionari tradizionali, ma come strumenti complementari. Mentre l'auto-report misura la "tipical performance" (ciò che la persona crede di fare), le GBA misurano la "maximal performance" (ciò che la persona fa in condizioni ottimali di sforzo e contesto).
3. Mitigazione dei Bias: Conferma che gli ambienti di gioco possono ridurre la distorsione delle risposte e l'ansia da test, fornendo dati comportamentali più autentici rispetto ai questionari standard.

5. Significato e Implicazioni

• Per la Selezione del Personale: Affidarsi a un singolo metodo di valutazione (solo questionari o solo giochi) comporta rischi di classificazione errata (falsi positivi o falsi negativi). Le organizzazioni dovrebbero adottare framework di valutazione multi-metodo che integrino indicatori di percezione e comportamento per ottenere una visione olistica della competenza.
• Implicazioni Teoriche: Lo studio sfida l'assunzione di equivalenza di misura tra strumenti psicometrici tradizionali e nuovi strumenti digitali basati sul comportamento. Sottolinea la necessità di considerare il contesto e la situazione come fattori critici nella valutazione delle soft skills.
• Limitazioni e Futuro: Lo studio è stato condotto su un campione omogeneo di studenti. Futuri ricerche dovrebbero includere campioni professionali diversificati e contesti reali di reclutamento per verificare la validità predittiva delle GBA su larga scala.

In conclusione, lo studio evidenzia che il problem-solving è un costrutto complesso che richiede una misurazione multidimensionale: ciò che le persone pensano di essere capaci di fare non corrisponde necessariamente a come agiscono quando affrontano problemi nuovi e vincolati dal tempo.