ChatGPT-Studie: Leser lieben KI-Texte, solange sie es nicht wissen

Eine Villanova-Studie zeigt: KI-Geschichten kommen bei Lesern besser an als menschliche Texte, wenn kaum jemand die Urheberschaft weiß. Der Grund liegt nicht in der Qualität, sondern im Kopf der Leser.

KI-unterstützt · redaktionell geprüft

Eine Geschichte gewinnt nicht, weil sie besser geschrieben ist. Sie gewinnt, weil der Leser glaubt, ein Mensch habe sie verfasst. Genau das zeigt eine neue Studie der Villanova University und trifft damit einen wunden Punkt der Kreativbranche: KI-generierte Kurzgeschichten schneiden bei Lesern regelmäßig besser ab als von Menschen geschriebene, sobald die Herkunft verschleiert wird. Der Kontext dafür ist längst gesetzt.

ChatGPT ist laut einer Bitkom-Umfrage aus dem Jahr 2025 die bekannteste generative KI-Anwendung in Deutschland: 43 Prozent der Befragten nutzen das Tool aktiv, weitere 43 Prozent kennen es, verzichten aber auf die Nutzung. Textgenerierung per KI ist also längst Alltag, nicht Zukunftsmusik. Insbesondere der Durchbruch von ChatGPT hat dazu beigetragen, dass Maschinen heute nicht nur Fragen beantworten oder Bilder erstellen, sondern auch Geschichten erzählen, die auf den ersten Blick kaum noch von menschlichen Werken zu unterscheiden sind.

Drei Experimente, ein klares Muster

Die Forscher der Villanova University gingen methodisch in drei Schritten vor. Für die Untersuchung, veröffentlicht im Fachjournal Judgment and Decision Making, lasen mehr als 2.500 Teilnehmende Kurzgeschichten von Menschen und von ChatGPT-4.0. Im größten der drei Experimente mit 1.682 Teilnehmenden im Alter zwischen 18 und 81 Jahren erhielten die Probanden jeweils eine Geschichte zusammen mit teils korrekten, teils falschen Angaben zur Urheberschaft. Anschließend sollten sie die Qualität sowie die Immersion, also wie fesselnd der Text war, bewerten. Bei der Qualitätsbewertung erreichten die KI-Texte einen Mittelwert von 1,54, menschliche Texte kamen nur auf 0,97. Bei der Immersion lag die KI mit 1,42 ebenfalls vor den menschlichen Autoren mit 1,00.

In den beiden weiteren Experimenten mit 424 beziehungsweise 481 Teilnehmenden änderten die Forscher das Design: Diesmal erhielt jeder Proband je eine menschliche und eine KI-Geschichte ohne jegliche Information zum Autor. Die Aufgabe bestand darin, die Urheberschaft selbst zu bestimmen. Noch interessanter als die Qualitätswerte war deshalb, wie schlecht die Probanden dabei abschnitten. Die Erkennungsraten lagen bei lediglich 39,93 Prozent und 51,97 Prozent, wie Borncity berichtet, teils also deutlich unter dem, was reiner Zufall liefern würde. Über 60 Prozent beziehungsweise über 48 Prozent der Teilnehmenden identifizierten die Herkunft schlicht falsch. Den vorliegenden Daten zufolge konnten die Teilnehmer KI-generierte Geschichten damit nicht zuverlässiger als durch Raten von menschlichen Werken unterscheiden.

KI-Texte punkten mit Klarheit statt Tiefe

Der eigentliche Kniff der Studie liegt im Zusammenspiel aus Erwartungshaltung und tatsächlicher Textqualität.

Wurde den Teilnehmern explizit mitgeteilt, dass eine Geschichte von einem Menschen stamme, fielen die Bewertungen systematisch höher aus, unabhängig davon, ob der Text tatsächlich menschlichen Ursprungs war oder von der KI generiert wurde. Dieser Effekt der positiven Zuschreibung zog sich durch alle drei Experimente.

Der Bias sitzt nicht im Text, sondern im Kopf

Hauptautorin Deena Weisberg von der Villanova University bringt den Kern des Problems auf den Punkt: „Ich würde sagen, dass die öffentlichen Vorstellungen über die Fähigkeiten von KI zunehmend veraltet sind“, erklärt sie laut Basicthinking. Menschen unterschätzen die KI systematisch, weil sie kreatives Schreiben fälschlich an emotionale Erfahrung und Lebenserfahrung koppeln, Eigenschaften, die man einer Maschine per Definition abspricht. Weisberg nennt das eine Voreingenommenheit zugunsten von Erzählungen, die von echten Menschen verfasst wurden. Diese Voreingenommenheit tritt, wie die Daten zeigen, nicht nur ein, wenn Geschichten tatsächlich von Menschen geschrieben wurden, sondern bereits dann, wenn die Leser dies nur annehmen. Der Glaube an die Urheberschaft wiegt damit schwerer als der Text selbst. Stilistisch erklärt sich der KI-Vorteil einfacher: „Texte von KI sind tendenziell klarer, direkter und leichter zu erfassen“, so Weisberg.

Menschliche Geschichten seien dagegen subtiler und komplexer, was Leser offenbar seltener goutieren, wenn sie schnell durch einen Text navigieren wollen. Von den Probanden wurden die KI-Texte zudem als flüssiger und leichter lesbar beschrieben, ein Effekt, der die höheren Immersionswerte zumindest teilweise erklärt. Wer viel mit KI-Systemen arbeitet, erkennt die typischen Muster laut Weisberg besser. Die Forscher konnten feststellen, dass bei der Unterscheidung zwischen KI-Texten und menschlichen Geschichten vor allem die Vertrautheit mit KI-Systemen den Ausschlag gibt. Menschen, die im Alltag regelmäßig mit KI-generierten Inhalten zu tun haben, erkennen typische Muster wie übermäßige Klarheit oder eine bestimmte Satzstruktur eher wieder als gelegentliche Nutzer. Literarisches Fachwissen half beim Erkennen dagegen kaum, was zeigt: KI-Kompetenz ist der eigentliche Hebel, nicht Bildungsgrad oder Leseerfahrung. „Dies deutet darauf hin, dass die Förderung von KI-Kompetenz ein Weg sein könnte, Menschen dabei zu unterstützen, sich in der neuen, von KI geprägten Welt zurechtzufinden“, so Weisberg laut Basicthinking.

Business Punk Check

Der Hype-Satz „KI schreibt jetzt besser als Menschen“ ist Unsinn. Die Studie zeigt etwas anderes: KI-Texte sind klarer, glatter, leichter konsumierbar. Genau das verwechseln Leser mit Qualität. Für Verlage, Marketing-Teams und Content-Abteilungen bedeutet das eine unbequeme Wahrheit. Wenn kaum jemand die Urheberschaft kennt, verliert das Argument „von Menschenhand“ an Verkaufskraft. Early Adopters sollten die Frage stellen, ob Klarheit oder Tiefe das eigentliche Produktversprechen ist. Wer auf Masse und Tempo setzt, bekommt mit KI-Tools messbar bessere Durchschnittswerte. Wer auf literarische Komplexität als Differenzierungsmerkmal baut, muss das jetzt aktiv kommunizieren, statt sich auf Autorenschaft allein zu verlassen. Der Bias zugunsten von Menschen existiert noch, aber er schrumpft mit jeder Trainingsgeneration.

Auf einen Blick

• Eine Villanova-Studie mit mehr als 2.500 Teilnehmenden zeigt, dass KI-generierte Kurzgeschichten in Qualität und Immersion höher bewertet wurden als menschliche Texte.
• Die Erkennungsraten der Urheberschaft lagen in zwei Experimenten bei nur 39,93 Prozent und 51,97 Prozent, Leser konnten KI-Texte kaum zuverlässig identifizieren.
• Wurde Teilnehmenden fälschlich gesagt, ein Text stamme von einem Menschen, fiel die Bewertung systematisch besser aus, unabhängig von der tatsächlichen Herkunft.
• ChatGPT nutzen laut Bitkom-Umfrage 43 Prozent der Deutschen aktiv, weitere 43 Prozent kennen das Tool ohne es zu verwenden.

Quellen: Basicthinking, Borncity