Towards a Linguistic Evaluation of Narratives: A Quantitative Stylistic Framework
Dit paper introduceert een kwantitatief stilistisch raamwerk dat 33 linguïstische kenmerken gebruikt om narratieve kwaliteit automatisch te evalueren en hiermee professioneel bewerkte teksten succesvol onderscheidt van zelfgepubliceerde werken.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je voor dat je een nieuwe roman wilt schrijven. Je hebt een geweldig verhaal bedacht, spannende personages en een plot dat je niet meer loslaat. Maar als je het boek op de markt brengt en de taal is rommelig, de zinnen haperen en de woordenkeuze saai is, zal niemand het lezen. Kwaliteit van taal is de onzichtbare ruggengraat van elk goed verhaal.
Dit artikel van Alessandro Maisto is als het ware een digitale taal-thermometer. De auteur probeert een manier te vinden om de kwaliteit van een verhaal niet door een mens te laten beoordelen (wat duur, langzaam en subjectief is), maar door een computer te laten meten.
Hier is hoe het werkt, vertaald naar alledaagse taal:
1. De "Taal-Foto" van een Boek
Stel je voor dat elk boek een uniek gezicht heeft. De auteur neemt van 23 boeken een digitale foto, maar in plaats van een foto van het omslag, maakt hij een statistische foto van de taal.
Hij kijkt niet naar wat er in het verhaal staat (bijvoorbeeld: "is de draak wel geloofwaardig?"), maar naar hoe het geschreven is. Hij meet 33 verschillende dingen, zoals:
- Woordenschat: Gebruikt de schrijver alleen simpele woorden of ook moeilijke, zeldzame woorden? (Zoals het verschil tussen een kindertekening en een schilderij van een meester).
- Zinsbouw: Zijn de zinnen netjes opgebouwd of zijn het een wirwar van losse stukjes?
- Tijdsgevoel: Houdt de schrijver zich aan de tijd? (Bijvoorbeeld: niet ineens van "gisteren" naar "morgen" springen zonder reden).
- Beeldspraak: Gebruikt de schrijver creatieve metaforen (zoals "tijd is een dief") of blijft hij bij platte feiten?
2. Het Grote Experiment: De "Goede" vs. De "Slechte"
Om te testen of deze thermometer werkt, pakte de auteur twee soorten boeken:
- De "Meesters": Bekende, bekroonde boeken (zoals Harry Potter, De Da Vinci Code, De Hobbit). Deze zijn door professionele redacteuren geperfectioneerd.
- De "Amateurs": Zelfgepubliceerde boeken en romans die door critici vaak als "slecht" worden beschouwd (vaak romantische thrillers of fanfiction).
Hij liet de computer deze boeken analyseren en vervolgens in groepjes sorteren, zonder dat de computer wist welke boeken "goed" of "slecht" waren.
Het resultaat? De computer was verbazingwekkend goed! Hij groepeerde de beroemde, bekroonde boeken bijna perfect bij elkaar en scheidde ze duidelijk van de minder goed geschreven boeken. Het was alsof je een groepje professionele chefs en een groepje mensen die net beginnen met koken in een kamer zet, en de computer direct weet wie wie is, puur op basis van hoe de gerechten eruitzien.
3. De Nieuwe "Kwaliteitsmeter"
Vervolgens gebruikte hij deze 23 boeken als een streefbeeld (een soort "gouden standaard"). Hij nam duizenden korte teksten (geschreven door mensen én door AI) en mat deze tegen het streefbeeld aan.
De uitkomst was verrassend: Deze nieuwe, simpele taal-meting was beter dan de meest geavanceerde AI-modellen die er vandaag de dag zijn om tekst te beoordelen.
- De les: Soms is een simpele, slimme meetlat (zoals het tellen van zinsconstructies) betrouwbaarder dan een supercomputer die probeert te "voelen" of een verhaal leuk is. AI-modellen die andere AI's beoordelen, kunnen in een vicieuze cirkel terechtkomen en dezelfde fouten maken. De "ouderwetse" taalmeting bleek eerlijker.
Waarom is dit belangrijk?
Tot nu toe was het beoordelen van een verhaal heel erg afhankelijk van menselijke mening. "Ik vind dit boek leuk," "Ik vind dit saai." Dat is lastig voor schrijvers en uitgevers die weten willen of hun werk wel goed is.
Dit onderzoek laat zien dat we kwaliteit kunnen meten met cijfers. Het is alsof we een auto niet alleen laten testen door een rij-instructeur (de mens), maar ook met een computer die de remafstand, de brandstofverbruik en de motorprestaties exact meet. Als die cijfers goed zijn, is de auto waarschijnlijk ook een goede auto.
Kortom:
Dit artikel bewijst dat de taal zelf een enorme boodschapper is van kwaliteit. Als je de grammatica, de woordkeuze en de structuur van een verhaal goed meet, kun je vrij nauwkeurig voorspellen of het een meesterwerk is of een mislukking, zelfs zonder het verhaal zelf te hebben gelezen. Het is een nieuwe manier om te zeggen: "Goede taal is de basis van een goed verhaal."
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.