Know Your Author: Does the AI Penalty Hold in Short Fiction?
Diese vorregistrierte Studie mit 254 Teilnehmern findet, dass die Kennzeichnung kurzer Belletristik als KI-generiert zwar die Bewertung von Qualität oder Genuss nicht signifikant senkt, aber die wahrgenommene Anstrengung des Autors drastisch reduziert und mit den vorherigen Einstellungen der Leser gegenüber KI interagiert, um Empfehlungsentscheidungen zu beeinflussen.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Stellen Sie sich vor, Sie nehmen an einem Blindverkostungstest für Kekse teil. Man reicht Ihnen zwei identische Kekse. Einer ist mit der Aufschrift „Von Oma gebacken“ versehen, der andere mit „Von einem Roboter gebacken“.
Schon lange vor langer Zeit haben sich Menschen Sorgen gemacht, dass Sie, wenn Sie das Etikett „Roboter“ sehen, automatisch denken werden, der Keks schmecke schlechter, selbst wenn es genau derselbe Teig ist. Diese Angst wird als „KI-Strafe“ (AI Penalty) bezeichnet.
Ein Forschungsteam der San Diego State University beschloss, diese Idee mit Kurzgeschichten anstelle von Keksen zu testen. Hier ist, was sie herausfanden, einfach erklärt:
Das Experiment: Die „magischen“ Geschichten
Die Forscher naherten zwei Kurzgeschichten (jeweils etwa 200 Wörter) und ließen eine einzige KI diese schreiben. Dann zeigten sie diese Geschichten 254 Menschen. Aber hier war der Trick: Sie änderten das Etikett über der Geschichte für verschiedene Gruppen:
- Gruppe A sah: „Von einem Menschen geschrieben.“
- Gruppe B sah: „Von einer KI geschrieben.“
- Gruppe C sah: Gar kein Etikett.
Entscheidend war, dass die Geschichten identisch waren. Die einzige Änderung war das Namensschild.
Die große Überraschung: Keine „Strafe“
Die Forscher erwarteten, dass die „KI“-Gruppe die Geschichten hinsichtlich Kreativität, Vergnügen und Originalität schlechter bewerten würde. Sie dachten, die „Mensch“-Gruppe würde sie am meisten lieben.
Sie lagen falsch.
Die Etiketten änderten die Durchschnittsbewertung nicht. Egal, ob die Menschen glaubten, die Geschichte sei von einem Menschen, einem Roboter geschrieben worden oder ob sie es gar nicht wussten – sie genossen die Geschichte etwa gleich sehr. Die „KI-Strafe“ zeigte sich nicht in den abschließenden Bewertungen.
Der wahre Unterschied: Der „Aufwand“-Messwert
Wenn also die Punktzahlen gleich waren, hat das Etikett dann überhaupt etwas bewirkt? Ja, es änderte, wie viel Arbeit die Leute in die Geschichte hineininterpretierten.
- Wenn die Leute das Etikett „Mensch“ sahen, schätzten sie, dass der Autor etwa 148 Minuten zum Schreiben benötigt hatte.
- Wenn sie das Etikett „KI“ sahen, schätzten sie, dass der Autor nur 6 Minuten gebraucht hatte.
- Wenn es kein Etikett gab, schätzten sie etwa 75 Minuten.
Es ist wie beim Betrachten eines Gemäldes. Wenn man denkt, ein Mensch hätte es gemalt, stellt man sich vor, er hätte Wochen damit verbracht. Wenn man denkt, ein Roboter hätte es gemacht, stellt man sich vor, es hätte Sekunden gedauert.
Warum das wichtig ist: Die Verbindung zur „harten Arbeit“
Die Studie fand eine starke Verbindung zwischen dem Gedanken, dass jemand hart gearbeitet hat, und dem Genuss des Ergebnisses.
- Menschen, die dachten, die Geschichte habe lange Zeit zum Schreiben benötigt (unabhängig davon, wer sie schrieb), neigten dazu, sie mehr zu genießen.
- Selbst innerhalb der Gruppe, die dachte, die Geschichte sei KI-generiert, genossen die Leute, die vermuteten: „Hey, das muss ja eigentlich eine Weile gedauert haben“, die Geschichte mehr als diejenigen, die dachten: „Das war im Handumdrehen fertig.“
Es scheint, als nutzen unsere Gehirne eine Abkürzung: „Wenn es lange gedauert hat, muss es gut sein.“ Das KI-Etikett unterbrach diese Abkürzung, indem es die Menschen dazu brachte zu denken: „Oh, das ging blitzschnell, also war es wahrscheinlich nicht so besonders“, obwohl die Geschichte selbst dieselbe war.
Der „Einstellung“-Faktor
Die Studie fand auch heraus, dass die persönliche Einstellung einer Person gegenüber KI eine Rolle spielte.
- Menschen, die KI generell mochten, empfanden es als positiv, die mit „KI“ gekennzeichneten Geschichten weiterzuempfehlen.
- Menschen, die KI generell ablehnten, waren weniger geneigt, die mit „KI“ gekennzeichneten Geschichten weiterzuempfehlen.
Da diese beiden Gruppen in entgegengesetzte Richtungen zogen, ergab sich der Durchschnittswert am Ende als gleich. Es ist wie ein Tauziehen, bei dem die „KI-Liebhaber“ und die „KI-Hasser“ sich gegenseitig neutralisieren, sodass die Endpunktzahl unverändert bleibt.
Ein kleiner Fehler
Interessanterweise vergaßen etwa 14 % der Menschen das Etikett komplett. Sie lasen die Geschichte und erinnerten sich nicht daran, ob sie von einem Menschen oder einem Roboter stammte. Dies deutet darauf hin, dass die Menschen beim entspannten Lesen das „Autor“-Tag vielleicht gar nicht bemerken, was die Strafe noch unwahrscheinlicher macht.
Das Fazente
Wenn Sie eine Kurzgeschichte schreiben und sie mit „Von KI erstellt“ kennzeichnen, werden Sie wahrscheinlich nicht allein wegen des Etiketts eine schlechtere Bewertung erhalten. Dieses Etikett könnte jedoch dazu führen, dass die Leute denken, Sie hätten sich nicht viel Mühe gegeben. Und da wir Menschen dazu neigen, Anstrengung zu belohnen, ist es diese Wahrnehmung von „geringer Anstrengung“, die tatsächlich die Art und Weise verändert, wie wir über die Arbeit fühlen, und nicht die Tatsache, dass eine Maschine sie erstellt hat.
Kurz gesagt: Das Etikett hat die Punktzahl nicht geschmälert, aber es hat die Geschichte verändert, die die Menschen sich selbst über die harte Arbeit des Autors erzählten.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.