KI-Detektoren wie GPTZero sollen erkennen, ob ein Text von einem Menschen oder einer Maschine stammt. Doch was in der Theorie verlockend klingt, scheitert in der Praxis an entscheidenden Stellen. Eine neue Studie zeigt, wie fehleranfällig diese Werkzeuge wirklich sind und warum das nicht nur Studierende, sondern auch Autor:innen, Freelancer:innen und überhaupt alle betrifft, die professionell mit Sprache arbeiten.
Was GPTZero macht und wie es funktioniert
Seit ChatGPT und ähnliche Sprachmodelle flüssige, überzeugend klingende Texte in Sekunden erzeugen, wächst eine Frage: Wer hat das wirklich geschrieben? Louie Giray, Kershnee Sevnarayan und Kgabo Bridget Maphoto von der Mapúa University Manila und der University of South Africa haben sich in einem aktuellen Preprint genau dieser Frage gewidmet. Ihr Fokus liegt auf GPTZero, einem der bekanntesten KI-Detektions-Tools, das vor allem im Bildungsbereich eingesetzt wird. Ihre Befunde sind zugleich für alle relevant, die professionell texten: Wer Texte für Auftraggeber liefert, kann leicht ins Visier dieser Werkzeuge geraten.
GPTZero wurde Anfang 2023 von Edward Tian an der Princeton University entwickelt und hat seitdem über zehn Millionen Nutzerinnen und Nutzer gewonnen. Das Tool analysiert Texte auf statistische Muster, die typisch für maschinell erzeugte Sprache sein sollen. Dabei stützt es sich vor allem auf zwei Kennzahlen:
- „Perplexity“: Wie vorhersehbar ist der Text? KI-Texte folgen häufig vorhersehbaren Mustern.
- „Burstiness“: Wie stark schwankt die Satzlänge? Menschen schreiben tendenziell abwechslungsreicher als Sprachmodelle.
Ergänzt werden diese Metriken durch stilistische Merkmale und eine Funktion namens „AI Vocabulary“, die nach typischen KI-Vokabular sucht. Das Ergebnis ist ein Wahrscheinlichkeitswert: Wurde dieser Text von einem Menschen oder einer Maschine verfasst?
Um diesen Artikel zu lesen, benötigst du mindestens einen kostenlosen „UPLOAD Community“-Account.
Hol ihn dir in nur einem Schritt und schalte den Beitrag jetzt frei:
Nach dem Abschicken kannst du den Artikel sofort lesen. Wir schicken dir weitere Infos in einer E-Mail.
Es lohnt sich: Mit deinem kostenlosen Community-Account hast du Zugriff auf zahlreiche weitere spannende Artikel und nützliche Downloads. Außerdem profitierst du von exklusiven Rabatten.
Du erfährst zudem immer, sobald wir neue Inhalte für dich veröffentlicht haben.
Hast du bereits einen Account?
Dann melde dich erst hier an und lade danach diese Seite neu.
UPLOAD ist eine digitale Lernplattform für Content-Schaffende, herausgegeben von Falk Hedemann und Jan Tißler. Möchtest du uns gern kennen lernen, empfehlen wir dir das „Update am Montag“. Darin erfährst du einmal pro Woche, was es Neues bei uns gibt.