Can You Make It Sound Like You? Post-Editing LLM-Generated Text for Personal Style
Diese Studie stellt fest, dass zwar die Nachbearbeitung von von LLMs generierten Entwürfen den Nutzern hilft, einige Aspekte ihres persönlichen Stils einzubringen, der resultierende Text jedoch stilistisch näher am ursprünglichen Modelloutput als am ununterstützten menschlichen Schreiben liegt und eine verringerte Vielfalt aufweist, wodurch eine Kluft zwischen wahrgenommener Authentizität und messbarer stilistischer Ähnlichkeit entsteht.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Die große Frage: Kann man KI-geschriebene Texte „vermenschlichen"?
Stellen Sie sich vor, Sie bitten einen sehr höflichen, gut gebildeten Roboter, einen Eidesstattlichen Schwur für eine Hochzeit oder einen Entschuldigungsbrief für Sie zu verfassen. Der Roboter leistet hervorragende Arbeit: Die Grammatik ist perfekt, die Struktur ist logisch und er sagt alles Richtige. Aber er klingt ein wenig wie ein Roboter. Es fehlt seine spezifische „Stimme" – Ihre Eigenheiten, Ihr Slang, Ihre einzigartige Art, Dinge zu formulieren.
Die Forscher stellten die Frage: Wenn Sie diesen Entwurf des Roboters nehmen und selbst bearbeiten, können Sie ihn wieder so klingen lassen, als käme er von Ihnen?
Sie fragten nicht nur Menschen, was sie dachten; sie führten eine Studie mit 81 Personen durch, um zu prüfen, ob diese Strategie der „Nachbearbeitung" tatsächlich funktioniert.
Das Experiment: Der „Roboter-Entwurf" vs. der „menschliche Entwurf"
Stellen Sie sich die Studie wie einen Kochwettbewerb mit zwei Teams vor:
- Das Kontrollteam (Die „Von-Grund-auf"-Köche): Diese Teilnehmer erhielten eine Liste mit Zutaten (Details zur Geschichte) und mussten den gesamten Brief oder die Rede selbst verfassen, ohne Hilfe.
- Das Behandlungs-Team (Die „Spezialitäten"-Köche): Diese Teilnehmer erhielten dieselbe Zutatenliste, aber ein Roboter-Koch hatte zunächst eine komplette Mahlzeit (einen Entwurf) zubereitet. Die Teilnehmer mussten dann die Mahlzeit des Roboters probieren und sie anpassen – indem sie ihre eigenen Gewürze hinzufügten, die Würze änderten oder das Anrichten neu arrangierten –, um sie so schmecken zu lassen wie ihre eigene Küche.
Was sie fanden: Das „Unheimliche Tal" des Stils
Die Forscher nutzten ein spezielles Computer-Tool (wie einen High-Tech-Geschmackstester), um die Texte zu analysieren. Hier ist das, was sie entdeckten:
1. Sie können die Stimme des Roboters verbessern, aber nicht vollständig auslöschen.
Als die Teilnehmer den Entwurf des Roboters bearbeiteten, klang der Text zwar mehr nach ihnen und weniger nach einem Roboter. Es war eine signifikante Verbesserung.
- Die Analogie: Stellen Sie sich vor, der Roboter schrieb einen Song im perfekten, generischen Pop-Stil. Als Sie ihn bearbeiteten, fügten Sie Ihre eigenen Gitarrenriffs hinzu und änderten die Texte, um sie persönlicher zu gestalten. Es klang viel mehr nach Ihrer Band. Wenn Sie jedoch genau hinhörten, waren der zugrunde liegende Beat und die Drum-Machine immer noch vom Roboter. Sie konnten den „maschinenhaften" Klang nicht vollständig loswerden.
2. Der „Roboter-Geruch" ist immer noch da.
Selbst nachdem die Menschen den Text bearbeitet hatten, zeigte die Computeranalyse, dass die Endversion mehr nach dem ursprünglichen Entwurf des Roboters roch als nach dem „von Grund auf" geschriebenen Text der Menschen.
- Die Analogie: Es ist wie das Übermalen einer Wand. Sie können ein wunderschönes, einzigartiges Wandgemälde über eine langweilige graue Wand malen, aber wenn Sie sich die Textur der Farbe ansehen, können Sie immer noch erkennen, dass sie auf eine bestimmte Art von Trockenbauwand aufgetragen wurde, die der Roboter verwendet hat. Die „Roboter-Textur" war immer noch darunter.
3. Das Problem des „Gruppenstils".
Als die Menschen von Grund auf schrieben, klang jeder anders als der andere (hohe Vielfalt). Als sie den Entwurf des Roboters bearbeiteten, klangen sie alle ein wenig ähnlicher miteinander.
- Die Analogie: Wenn Sie 10 Menschen bitten, eine Katze von Grund auf zu zeichnen, erhalten Sie 10 sehr unterschiedliche Katzen. Wenn Sie ihnen 10 identische, von Robotern gezeichnete Katzen geben und sie bitten, sie „eigen zu machen", landen sie vielleicht alle bei Katzen, die ein wenig wie die ursprüngliche des Roboters aussehen, nur mit leicht unterschiedlichen Ohren oder Schwänzen. Sie verloren etwas von ihrer einzigartigen „Wildheit".
Die große Überraschung: Was Menschen denken vs. was Computer messen
Dies ist der interessanteste Teil der Studie.
- Der Computer sagte: „Dieser Text hat immer noch 30 % Roboter-DNA. Er ist nicht vollständig menschlich."
- Die Menschen sagten: „Dieser Text klingt genau wie ich! Ich würde ihn gerne meinem Freund schicken."
Es gab eine Lücke zwischen den Daten und dem Gefühl. Die Teilnehmer fühlten, dass ihr bearbeiteter Text authentisch war und ihren Stil widerspiegelte, obwohl der Computer immer noch die Fingerabdrücke des Roboters erkennen konnte.
- Die Analogie: Stellen Sie sich vor, Sie kaufen eine sehr realistische Plastikblume. Sie bemalen sie, fügen ein echtes Blatt hinzu und stellen sie in eine Vase. Sie schauen sie an und sagen: „Das ist eine wunderschöne Blume." Ein Botaniker (der Computer) schaut sie an und sagt: „Das ist zu 60 % Plastik." Sie lügen nicht; es ist Ihnen einfach egal, dass es Plastik ist, weil die Blume für Sie echt wirkt.
Warum mögen die Menschen das?
Die meisten Teilnehmer gaben an, dass ihnen dieser Arbeitsablauf gefiel. Sie hatten das Gefühl, dass er ihnen Zeit und geistige Energie sparte.
- Die Hürde: Der Hauptgrund, warum einige Menschen diese Methode nicht nutzen wollten, war nicht, dass sie den Stil nicht korrigieren konnten; es war vielmehr, dass der ursprüngliche Entwurf des Roboters zu langweilig oder klischeehaft wirkte.
- Die Analogie: Es ist wie der Erhalt eines vorgefertigten Kuchens. Wenn der Kuchen trocken ist und nach Pappe schmeckt, wird keine Menge an Glasur Sie dazu bringen, ihn essen zu wollen. Aber wenn der Kuchen nur etwas schlicht ist, können Sie ihn leicht glasieren, um ihn köstlich zu machen. Das Problem war die „Trockenheit" der Ideen des Roboters, nicht die Schwierigkeit der Bearbeitung.
Das Fazit
Die Studie kommt zu dem Schluss, dass Nachbearbeitung funktioniert, aber mit Grenzen.
- Sie können KI-Texte definitiv so klingen lassen, als kämen sie von Ihnen.
- Sie werden das Gefühl haben, dass sie von Ihnen klingen.
- Allerdings kann ein Computer immer noch erkennen, dass er von einem Roboter begonnen wurde, und das Endergebnis könnte etwas weniger vielfältig und einzigartig sein, als wenn Sie es vollständig von Grund auf geschrieben hätten.
Das Paper legt nahe, dass dies zwar ein nützliches Werkzeug zur Zeitersparnis ist, wir aber nicht erwarten sollten, dass es unsere einzigartigen menschlichen Stimmen perfekt imitiert, und wir uns bewusst sein müssen, dass der „Roboter-Geschmack" unter unseren Bearbeitungen immer noch nachklingen könnte.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.