Viele KI-Detektoren behaupten, mit einer gewissen Genauigkeit erkennen zu können, ob ein Text von einem Menschen oder von einer Software mit künstlicher Intelligenz geschrieben wurde.
Diese Detektoren sind jedoch ziemlich umstritten. Manche behaupten, sie würden nicht funktionieren, andere bezeichnen sie sogar rundheraus als Betrug.
Dennoch haben Schulleitungen, Marketingmanager, Lehrkräfte und viele andere Menschen dafür bestraft, dass ihre Inhalte von KI-Detektoren markiert wurden. Wie nützlich sind sie also wirklich?
Was genau ist ein KI-Detektor?
Ein KI-Detektor ist ein Softwaretool, das entwickelt wurde, um Inhalte zu erkennen, die von Systemen künstlicher Intelligenz (KI) erzeugt wurden. Im Wesentlichen unterscheidet er zwischen von Menschen erstellten Inhalten und Inhalten, die von KI-Algorithmen wie ChatGPT generiert wurden.
Wie funktionieren KI-Detektoren?
KI-Detektoren sehen Plagiatsprüfern sehr ähnlich. Sie vergeben einen Prozentwert: 0 % bedeutet, dass eine Wahrscheinlichkeit von 0 % besteht, dass der Text von KI geschrieben wurde. 100 % bedeutet, dass der Detektor zu 100 % sicher ist, dass der Text von KI geschrieben wurde.
Bei KI-Detektoren wünschen wir uns also niedrige Werte.
Dieses Prozentmodell kann irreführend sein. Ein Wert von 40 % könnte den Eindruck erwecken, dass 40 % des Artikels von KI geschrieben wurden, tatsächlich bedeutet es aber nur, dass das Programm sich lediglich zu 40 % sicher ist, dass der Text von KI stammt. (Und was bedeutet das? Eigentlich nichts.) Manche KI-Detektoren markieren sogar bestimmte Textabschnitte, als wären genau das die von der KI geschriebenen Teile.
Eine Lehrkraft, die zuvor Plagiatsprüfungen genutzt hat, könnte sich zum Beispiel wegen dieser Prozentwerte Sorgen machen, denn wenn eine Arbeit zu 40 % plagiiert wäre, wäre das Grund für disziplinarische Maßnahmen. Ein Wert von 40 % bei einem KI-Detektor kann jedoch unklar und subjektiv sein.
Beispiele für KI-Detektoren
Einige Beispiele für Websites, die behaupten, KI-geschriebenen Text erkennen zu können, sind:
- Originality.ai
- Undetectable.ai
- GPTZero
- Quillbot
Sind KI-Detektoren zuverlässig?
Hier ist ein Screenshot eines KI-Erkennungsergebnisses von Originality.ai, das auf seiner Startseite mit „99 % KI-Erkennungsgenauigkeit” wirbt.
Das Programm ist sich zu etwa 70 % sicher, dass der Text von KI geschrieben wurde, was bedeutet, dass eine sehr hohe Wahrscheinlichkeit besteht, dass der Text von KI-Software stammt. Eine Person, die diesen Text geschrieben hat, könnte wegen eines derart hohen KI-Werts in der Schule oder am Arbeitsplatz in Schwierigkeiten geraten.
Es gibt nur ein Problem: Der Text, den Originality.ai auf dem Foto „mit 99 % Genauigkeit” gescannt hat, sind die ersten 100 Wörter aus Die Kunst des Krieges von Sun Tzu, verfasst im fünften Jahrhundert vor Christus. Wir können also mit 100-prozentiger Sicherheit davon ausgehen, dass er nicht von ChatGPT geschrieben wurde.
Das bringt uns zur zentralen Frage: Sind KI-Detektoren präzise? Nein.
OpenAI hat bestätigt, dass KI-Detektoren nicht funktionieren. Die Cornell University hat eine Studie veröffentlicht, die zeigt, dass KI-Detektoren Menschen benachteiligen, deren Muttersprache nicht Englisch ist. Dennoch haben Universitätsprofessoren ganze Studierendenklassen durchfallen lassen, weil ChatGPT auf Nachfrage die Urheberschaft für deren Arbeit beanspruchte.
Allerdings behaupten manche Menschen, dass KI-Detektoren durchaus eine gewisse Glaubwürdigkeit besitzen – sie liefern nur keine so eindeutigen Antworten, wie es zunächst scheinen mag.
Diese Programme haben tendenziell eine niedrige Rate an falsch-negativen, aber eine hohe Rate an falsch-positiven Ergebnissen. Mit anderen Worten: Wenn eine KI-Erkennungssoftware sagt, dass etwas nicht von KI stammt, kannst du dir ziemlich sicher sein, dass das auch stimmt. Sagt sie hingegen, dass etwas von KI stammt, bedeutet das oft überhaupt nichts. Und wenn dir jemand vorwirft, künstliche Intelligenz genutzt zu haben, weil du bei einem KI-Detektor einen hohen Prozentwert erhalten hast, frag doch mal nach, ob diese Person dieselbe Logik auch bei Sun Tzu anwenden würde.
Wie kann ich also erkennen, ob ein Autor oder eine Studentin KI zum Schreiben nutzt?
Schau dir die Zeitstempel in Google Docs an
Wenn du wirklich wissen willst, ob jemand künstliche Intelligenz nutzt, um seine Arbeit zu schreiben, kannst du verlangen, dass die Person in Google Docs schreibt und dir den Link zur Verfügung stellt. So kannst du im Dokumentverlauf nachsehen und anhand der Zeitstempel prüfen, wie lange das Schreiben gedauert hat.
Nutze das Originality.ai-Plugin (aber ignoriere den KI-Wert)
Obwohl die KI-Erkennungsergebnisse von Originality.ai ungenau sind, bietet der Dienst ein Chrome-Plugin, mit dem du dir eine Aufzeichnung des Schreibprozesses eines beliebigen Google Docs ansehen kannst. So kannst du prüfen, ob jemand irgendwann einen Textblock aus einer externen Quelle eingefügt hat.
Auf Plagiate prüfen
Trotzdem solltest du einen Text in erster Linie auf Genauigkeit und Plagiate prüfen, bevor du ihn auf KI überprüfst. Auch wenn ChatGPT KI ins öffentliche Bewusstsein gerückt hat, macht es immer noch viele Fehler – etwa das Kopieren großer Textabschnitte aus zahlreichen Quellen im Web und das „Halluzinieren” von Informationen. Es gibt andere Unternehmen (wie TypeTone), die ein qualitativ hochwertigeres Produkt anbieten und nicht plagiieren.
Während eine Person möglicherweise plagiiert, indem sie Textabschnitte aus wenigen unterschiedlichen Quellen übernimmt, plagiieren KI-Bots geringerer Qualität eher, indem sie kleine Textabschnitte aus vielen verschiedenen Quellen kopieren. Wenn sich diese kleinen plagiierten Stücke jedoch summieren, kann trotzdem ein großer Teil des Textes plagiiert sein. Und obwohl wir festgestellt haben, dass ein hoher KI-Wert nicht viel bedeutet, ist ein hoher Plagiatswert in den meisten akademischen und beruflichen Umfeldern ein ernsthaftes Problem.
Denk dran: Ein niedriger Wert bedeutet nicht gutes Schreiben
Denk an das Sprichwort: „Irren ist menschlich.” Menschen machen Fehler, und KI-Detektoren wissen das. Das bedeutet, dass eine Arbeit voller Grammatikfehler und holpriger Formulierungen möglicherweise einen besseren Wert von den KI-Detektoren erhält. Manchmal wird ein Text, der grammatikalisch korrekt ist, eher als KI-geschrieben markiert.
KI wurde von Menschen erschaffen, und das bedeutet manchmal, dass sie menschliche Verzerrungen in sich trägt. So wurde KI-Detektoren beispielsweise vorgeworfen, strenger zu urteilen, wenn sie Inhalte scannen, die von Menschen geschrieben wurden, deren zweite Sprache Englisch ist. Nicht-Muttersprachler schreiben möglicherweise in einem internationaleren, neutraleren Englisch, das weniger auf Slang und lokale Redewendungen zurückgreift. KI-Detektoren könnten dies eher als von ChatGPT geschrieben markieren.
Wenn du Software nutzt, die dir beim Korrekturlesen und bei der Grammatikprüfung hilft, wie zum Beispiel Grammarly, wird dein Text aus vielen der oben genannten Gründe ebenfalls eher als KI-geschrieben markiert.
In diesem Sinne kann es so wirken, als würden KI-Detektoren Texte tatsächlich dafür bestrafen, grammatikalisch korrekter zu sein. Merk dir also Folgendes: Ein niedriger KI-Wert bedeutet nicht gleich gutes Schreiben, und ein hoher KI-Wert bedeutet nicht gleich schlechtes Schreiben.
Nicht alle KI-Programme sind gleich
Bei TypeTone erkennen wir, wie wichtig es ist, die Einzigartigkeit deines Tons und deiner Stimme zum Ausdruck zu bringen. Künstliche Intelligenz muss keine unkreativen, plagiierten oder ungenauen Inhalte erzeugen. Unsere digitalen Mitarbeiter und unser Chatbot sind vollständig an den modernsten EU-Technologievorschriften ausgerichtet, und wir zeigen ein Engagement für Qualität, das weit über billige Versprechen hinausgeht.
Typetone bietet KI-Mitarbeiter und ein KI-Chat-Tool, das perfekt für moderne Marketingteams geeignet ist. Unsere KI-Software ist einfach besser – sie ist sicher, hält sich an die Vorschriften (DSGVO-konform, check!) und passt perfekt zu deiner Marke.
Probiere Typetone Chat aus und erlebe, wie es deine Marketingziele voranbringen kann. Vereinbare noch heute eine Demo!
Datenschutz gewährleistet