Differentiating Between Human-Written and AI-Generated Texts Using Automatically Extracted Linguistic Features
Dit onderzoek toont aan dat, ondanks het vermogen van AI om menselijk taalgebruik te imiteren, er significante verschillen bestaan in fonologische, morfologische, syntactische en lexische kenmerken tussen door mensen geschreven en door ChatGPT gegenereerde teksten, wat de noodzaak onderstreept van geautomatiseerde analysetools en verbeterde trainingsmethoden voor AI.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Het Koffie-Test: Mens versus Robot in de Schrijfkooi
Stel je voor dat je twee koppen koffie krijgt. De ene is gemaakt door een ervaren barista die de bonen met liefde heeft geroosterd en de melk perfect heeft opgeschuimd. De andere is gemaakt door een supergeavanceerde koffieautomaat die precies weet hoe koffie moet smaken, gebaseerd op duizenden recepten. Ze zien er bijna hetzelfde uit, ruiken hetzelfde en proeven voor het grootste deel ook goed. Maar als je heel goed kijkt, zie je kleine verschillen.
Dit is precies wat deze studie doet, maar dan met teksten in plaats van koffie. De onderzoekers wilden weten: kun je een essay dat door een mens is geschreven, onderscheiden van een essay dat door een kunstmatige intelligentie (zoals ChatGPT) is geschreven? En zo ja, waar zit dat verschil?
De Proef: Een Schrijfwedstrijd
De onderzoekers namen vijf echte essays (geschreven door mensen, zoals studenten of leraren) en gaven ze aan ChatGPT met de opdracht: "Schrijf iets heel vergelijkbaars over hetzelfde onderwerp."
Vervolgens lieten ze een slim computerprogramma (een soort digitale taalkundige met een microscoop) deze teksten analyseren. Dit programma keek niet alleen naar de inhoud, maar naar de bouwstenen van de taal:
- De klanken (Fonologie): Welke letters en klanken komen vaak voor?
- De woordsoorten (Morfologie): Hoeveel zelfstandige naamwoorden, voegwoorden of voornaamwoorden?
- De zinsbouw (Syntaxis): Hoe zijn de zinnen in elkaar gezet?
- Het woordenboek (Lexicon): Gebruiken ze moeilijke woorden of simpele woorden?
Wat Vonden Ze? De "Robot-Handtekening"
Hoewel de AI-teksten op het eerste gezicht heel menselijk leken, bleek de computer dat ze een heel ander "recept" volgden. Hier zijn de belangrijkste verschillen, vertaald naar alledaagse termen:
1. De Klankkleur (Fonologie)
De AI-teksten hadden een voorkeur voor bepaalde "harde" klanken, zoals de 't', 'k' en 's' (in het Engels: alveolair en stemloos). Het was alsof de robot een beetje te veel van die scherpe, snelle klanken gebruikte. Menselijke teksten hadden juist meer variatie in de zachte klanken.
- Analogie: Het is alsof de robot een beetje te veel op een drumstel speelt met alleen de 'hi-hat', terwijl de mens ook de basdrum en de tom-toms gebruikt voor meer ritme.
2. De Woordkeuze (Morfologie & Lexicon)
Dit was het grootste verschil:
- De AI schreef als een drukkerij: Ze gebruikte veel zelfstandige naamwoorden (dingen, concepten) en voegwoorden (en, maar, of). Ze gebruikten ook veel moeilijke, academische woorden. Het resultaat was een tekst die erg formeel en "dik" aanvoelde, maar misschien iets te strak.
- De Mens schreef als een gesprekspartner: Ze gebruikten veel voornaamwoorden (ik, jij, wij) en werkwoorden (doen, zijn, hebben). Ze gebruikten meer functiewoorden (de, het, een) die de zinnen aan elkaar lijmen.
- Analogie: De AI bouwt een muur van bakstenen (naamwoorden) met cement (voegwoorden). De mens bouwt een huis met ramen en deuren (voornaamwoorden) waar je doorheen kunt kijken en waar mensen in kunnen wonen. De AI-tekst voelt soms als een museum: perfect, maar koud.
3. De Zinsbouw (Syntaxis)
De AI gebruikte meer bijvoeglijke naamwoorden (bijvoeglijke bepalingen) en schakelwoorden (zoals "daarom", "derhalve"). Mensen gebruikten meer voorzetsels (in, op, onder) om relaties aan te geven.
- Analogie: De AI legt alles uit met een uitgebreide instructiehandleiding. De mens vertelt een verhaal en laat je de connecties zelf voelen.
Waarom Is Dit Belangrijk?
1. De Robot kan nog niet perfect "mens" spelen
De studie laat zien dat AI nog steeds een eigen "stijl" heeft. Het is alsof een naaktslak een menselijke handdruk probeert te imiteren; hij doet het goed, maar de druk is net iets te strak of te koud. Als we weten waar het verschil zit, kunnen we de AI beter trainen om echt menselijk te klinken.
2. Het is een hulpmiddel voor leraren en artsen
Stel je voor dat een leraar honderden essays moet nakijken. Met dit soort tools kan de computer snel zien: "Hé, deze tekst heeft te veel zelfstandige naamwoorden en te weinig 'ik' of 'wij'. Dit lijkt wel op AI." Dit bespaart tijd. Ook voor artsen is dit handig: soms vertellen patiënten hun verhaal op een manier die wijzen op een taalstoornis. Een computer kan die patronen sneller zien dan een mens.
3. De "Koffieautomaat" moet nog leren
De onderzoekers concluderen dat AI nog niet klaar is om volledig te vervangen wat mensen doen. De AI is goed in het verzamelen van feiten en het maken van formele teksten, maar mist de "ziel" en de natuurlijke variatie van een menselijke schrijver.
Conclusie
Deze studie is als een detectiveverhaal waarbij de onderzoekers de "vingerafdrukken" van de taal zoeken. Ze ontdekten dat AI-teksten een heel specifiek patroon hebben: ze zijn te vol met moeilijke woorden, te vol met naamwoorden en missen de natuurlijke, losse flow van een menselijk gesprek.
Het goede nieuws? Nu we weten waar de "robot" zit, kunnen we de machines beter leren om niet alleen slim te zijn, maar ook echt menselijk te klinken. En voor ons als lezers betekent het dat we, als we goed opletten, misschien toch nog kunnen ruiken aan welke koffie de barista heeft gemaakt en welke uit de automaat komt.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.