Leveraging Speech to Identify Signatures of Insight and Transfer in Problem Solving

Technische Samenvatting: Het Benutten van Spraak om Signatuur van Inzicht en Transfer in Probleemoplossing te Identificeren

Probleem en Motivatie
Probleemoplossing gebaseerd op inzicht wordt vaak gekenmerkt door plotselinge, niet-voor de hand liggende overgangen in begrip, die vaak gepaard gaan met een subjectieve "Aha"-ervaring. Inzicht zelf is echter niet direct waarneembaar, en het oplossen van een inzichtprobleem garandeert geen discrete moment van herstructurering. Hoewel theoretische kaders suggereren dat inzicht een verschuiving inhoudt van een initiële probleemrepresentatie naar een alternatieve "probleemruimte" (bijvoorbeeld het versoepelen van beperkingen of het ontleden van blokken), blijft onduidelijk hoe deze interne verschuivingen zich manifesteren in waarneembaar gedrag, met name in hoe oplossers vergelijkbare problemen in de toekomst benaderen. Dit werk onderzoekt de onderscheidende kenmerken van spraak die wordt geproduceerd tijdens succesvolle probleemoplossing en hoe deze verbale patronen evolueren wanneer een ontdekte oplossingsstructuur kan worden overgedragen op daaropvolgende, vergelijkbare problemen.

Methodologie
De studie maakte gebruik van een hardop-denkenprotocol met 189 deelnemers die een reeks van vijf luciferrekenproblemen oplosten. In dit paradigma moeten deelnemers een ongeldige Romeinse cijfervergelijking omzetten in een geldige door het verplaatsen van één lucifer.

• Experimenteel Ontwerp: Deelnemers werden willekeurig toegewezen aan een van twee tussen-proefpersonencondities:
  • Zelfde Conditie: Alle vijf problemen deelden hetzelfde onderliggende transformatietype (bijvoorbeeld het wijzigen van een cijfer of operator), waardoor de ontdekte structuur kon worden hergebruikt.
  • Verschillende Conditie: Elk probleem vereiste een verschillend transformatietype, waardoor het hergebruik van een specifiek structureel inzicht werd voorkomen.
• Procedures: Deelnemers losten problemen online op terwijl ze hun gedachten hardop verwoordden. Audio werd continu opgenomen. Proeven werden gecategoriseerd in drie fasen ten opzichte van prestatie: pre-succes (onjuiste pogingen), eerste-succes (de eerste correcte oplossing, dienend als operationele marker voor herstructurering) en post-succes (daaropvolgende correcte proeven).
• Data-analysepijplijn:
  • Prestatie: Nauwkeurigheid en reactietijden werden geanalyseerd met behulp van mixed-effects modellen.
  • Spraakoutput: Audio werd gesegmenteerd om spraakdichtheid (proportie van de tijd dat gesproken werd) en spraaksnelheid (woorden per seconde) te berekenen.
  • Semantische Inhoud: Uitingen werden ingebed met het text-embedding-3-large model. Logistische regressie-classificators werden getraind om proeven te onderscheiden op basis van correctheid, fase en experimentele conditie.
  • Redeneringsbewegingen: Een groot taalmodel (GPT-5.1) labelde uitingen in zeven onderling uitsluitende categorieën: Voorstel, Evaluatie, Categorisatie, Herformulering, Affect, Opvulling, en Meta & Overig.

Belangrijkste Resultaten

1. Prestatie en Transfer:

   • Deelnemers in de Zelfde conditie vertoonden een significant grotere verbetering in zowel nauwkeurigheid als snelheid over de proeven heen in vergelijking met de Verschillende conditie.
   • Na het eerste succes losten deelnemers in de Zelfde conditie daaropvolgende problemen op met 83,7% nauwkeurigheid en snellere reactietijden (gemiddeld 89,9s) in vergelijking met de Verschillende conditie (44,0% nauwkeurigheid, gemiddeld 179,0s). Dit bevestigt dat de ontdekte structuur alleen succesvol werd overgedragen wanneer probleemtypes zich herhaalden.

2. Verbale Signatuur van Eerste Succes:

   • Toegenomen Spraak: Bij de eerste-succesproef spraken deelnemers meer (hogere spraakdichtheid) en sneller dan bij pre-succesproeven, ongeacht de experimentele conditie.
   • Semantische Verschuiving: Spraak bij correcte proeven was onderscheidbaar van onjuiste proeven op basis van semantische inhoud. Bovendien verschildde spraak bij de eerste-succesproef semantisch van pre-succesproeven in beide condities.
   • Versmalling van Zoekruimte: Op het moment van eerste succes overwogen deelnemers in beide condities minder verschillende kandidaat-bewegingen, wat wijst op een versmalling van de zoekruimte.

3. Verbale Signatuur van Transfer (Post-Succes):

   • Conditiesdivergentie: Cruciaal werden veranderingen in spraakpatronen na het eerste succes alleen waargenomen in de Zelfde conditie.
   • Voortdurende Toename van Spraak: In de Zelfde conditie bleven deelnemers meer en sneller spreken bij post-succesproeven in vergelijking met de eerste-succesproef. In de Verschillende conditie stabiliseerden spraakpatronen na het eerste succes.
   • Opkomst van Categorisatie: Deelnemers in de Zelfde conditie verhoogden significant de frequentie van Categorisatie-uitingen (het expliciet benoemen van het probleemtype of het noteren van gelijkenis met eerdere problemen) na het eerste succes. Dit deed zich niet voor in de Verschillende conditie.
   • Gefinaliseerde Voorstellen: In de Zelfde conditie verlaagden deelnemers verder het aantal onderscheiden kandidaat-bewegingen dat na het eerste succes werd overwogen, terwijl deelnemers in de Verschillende conditie dit niet deden.

Belangrijkste Bijdragen

• Schaalbare Analyse van Inzicht: De studie demonstreert de haalbaarheid van het gebruik van geautomatiseerde spraakherkenning en natuurlijke taalverwerking om hardop-denkenprotocollen in grote schaal te analyseren, en gaat voorbij aan eenvoudige nauwkeurigheidsmetrieken om de dynamiek van redeneren te vangen.
• Verbale Markers van Transfer: Het artikel identificeert specifieke verbale signatuur die louter prestatieverbetering onderscheidt van echte transfer. Specifiek zijn het vermogen om spontaan een probleem te categoriseren en de voortdurende toename van spraakdichtheid en snelheid kenmerken van overdraagbare inzichten.
• Toegankelijkheid van Inzicht: De bevindingen suggereren dat hoewel de voorlopers van inzicht moeilijk te articuleren kunnen zijn, het resulterende structurele begrip steeds toegankelijker wordt voor verbale rapportage naarmate het wordt hergebruikt.

Betekenis en Claims
De auteurs claimen dat succesvolle herstructurering in probleemoplossing meer doet dan alleen de taakprestatie verbeteren; het verandert fundamenteel hoe mensen over een probleem praten. De studie stelt dat het kenmerk van een overdraagbaar inzicht de toegankelijkheid ervan is voor verbale rapportage. Wanneer een oplosser een probleemtype tegenkomt dat een ontdekte structuur hergebruikt, lost hij of zij dit niet alleen sneller op, maar verschuift ook de redeneerstrategie om expliciete categorisatie en een meer gefocust zoekproces op te nemen.

Het artikel blijft bescheiden wat betreft de reikwijdte, en erkent dat luciferrekenen een beperkt paradigma is en dat het eerste succes dient als proxy voor herstructurering in plaats van een directe maatstaf voor subjectieve "Aha"-momenten. De auteurs suggereren dat toekomstig werk deze spraakanalyses kan combineren met subjectieve beoordelingen van inzicht om het verband tussen verbale signatuur en de interne ervaring van herstructurering verder te valideren. Uiteindelijk betoogt het werk dat wat mensen zeggen tijdens het oplossen van problemen patronen van succes en transfer onthult die door prestatiedata alleen niet kunnen worden vastgelegd.