Veel AI-detectors beweren dat ze je met een bepaalde mate van nauwkeurigheid kunnen laten weten of een tekst door een mens is geschreven of door kunstmatige-intelligentiesoftware.
Toch zijn deze detectors behoorlijk controversieel. Sommige mensen beweren dat ze niet werken, en anderen noemen ze zelfs ronduit oplichterij.
Toch hebben schoolbestuurders, marketingmanagers, docenten en anderen mensen gestraft voor het schrijven van content die door AI-detectors wordt gemarkeerd. Dus hoe nuttig zijn ze eigenlijk?
Wat is een AI-detector precies?
Een AI-detector is een softwaretool die is ontworpen om content te identificeren die is gegenereerd door kunstmatige-intelligentiesystemen (AI). In wezen maakt het onderscheid tussen door mensen gemaakte content en content die is gegenereerd door AI-algoritmes zoals ChatGPT.
Hoe werken AI-detectors?
AI-detectors lijken sterk op plagiaatcheckers. Ze kennen een percentagescore toe: 0% betekent dat er 0% kans is dat de tekst door AI is geschreven. 100% betekent dat de detector er 100% zeker van is dat de tekst door AI is geschreven.
Bij AI-detectors willen we dus lage scores.
Dit percentagemodel kan misleidend zijn. Een score van 40% zou kunnen doen vermoeden dat 40% van het artikel door AI is geschreven, maar in werkelijkheid betekent het dat het programma slechts 40% zeker is dat de tekst door AI is geschreven. (En wat betekent dat? Eigenlijk niets.) Sommige AI-detectors markeren zelfs bepaalde tekstdelen alsof dat de delen zijn die door AI zijn geschreven.
Een docent die eerder plagiaatcheckers heeft gebruikt, zou zich bijvoorbeeld zorgen kunnen maken over deze percentages, want als een paper voor 40% geplagieerd is, zou dat grond zijn voor disciplinaire maatregelen. Maar een score van 40% op een AI-detector kan onduidelijk en subjectief zijn.
Voorbeelden van AI-detectors
Een paar voorbeelden van websites die beweren AI-geschreven tekst te kunnen detecteren, zijn:
- Originality.ai
- Undetectable.ai
- GPTZero
- Quillbot
Zijn AI-detectors betrouwbaar?
Hier is een screenshot van een AI-detectieresultaat van Originality.ai, dat op zijn homepage beweert “99% AI Detection Accuracy” te hebben.
Het programma is ongeveer 70% zeker dat de tekst door AI is geschreven, wat betekent dat er een zeer goede kans is dat de tekst door AI-software is geschreven. Iemand die deze tekst schreef, zou hierdoor op school of op het werk in de problemen kunnen komen vanwege zo’n hoge AI-score.
Er is alleen één probleem: de tekst die Originality.ai “met 99% nauwkeurigheid” scande op de foto, zijn de eerste 100 woorden van De kunst van het oorlogvoeren van Sun Tzu, geschreven in de vijfde eeuw voor Christus. Dus we kunnen wel voor 100% zeker stellen dat dit niet door ChatGPT is geschreven.
Dit brengt ons bij de hamvraag: zijn AI-detectors nauwkeurig? Nee.
OpenAI bevestigde dat AI-detectors niet werken. Cornell University publiceerde een paper waarin wordt aangetoond dat AI-detectors bevooroordeeld zijn tegen mensen die geen Engelse moedertaalspreker zijn. Toch hebben universiteitsdocenten hele klassen studenten laten zakken omdat ChatGPT beweerde de eer voor hun werk op te eisen toen daarnaar werd gevraagd.
Dat gezegd hebbende, beweren sommige mensen dat AI-detectors wel degelijk geloofwaardigheid hebben, ze bieden alleen geen antwoorden die zo eenduidig zijn als ze lijken.
Deze programma’s hebben doorgaans een laag percentage valse negatieven, maar een hoog percentage valse positieven. Met andere woorden: als een AI-detectiesoftware zegt dat iets geen AI is, dan kun je er vrij zeker van zijn dat het inderdaad geen AI is. Maar als het zegt dat iets wel AI is, dan betekent dat vaak helemaal niets. En als iemand je ervan beschuldigt kunstmatige intelligentie te gebruiken omdat je een hoog percentage kreeg van een AI-detector, vraag diegene dan of ze dezelfde logica toepassen op Sun Tzu.
Dus, hoe kan ik weten of een schrijver of student AI gebruikt om te schrijven?
Bekijk de tijdstempels in Google Docs
Als je echt wilt weten of iemand kunstmatige intelligentie gebruikt om zijn of haar werk te schrijven, kun je vragen dat diegene in Google Docs schrijft en je de link geeft. Zo kun je in de documentgeschiedenis kijken en de tijdstempels bekijken om te zien hoelang het schrijven heeft geduurd.
Gebruik de Originality.ai-plugin (maar negeer de AI-score)
Originality.ai heeft weliswaar onnauwkeurige AI-controleresultaten, maar beschikt over een Chrome-plugin waarmee je een opname van het schrijfproces van elk Google Doc kunt bekijken. Zo kun je controleren of iemand op enig moment een stuk tekst uit een externe bron heeft geplakt.
Controleer op plagiaat
Dat gezegd hebbende, moet je schrijfwerk vooral controleren op nauwkeurigheid en plagiaat voordat je op AI controleert. Hoewel ChatGPT AI onder de publieke aandacht heeft gebracht, maakt het nog steeds veel fouten, zoals het kopiëren van grote stukken tekst uit talloze bronnen op het web en het “hallucineren” van informatie. Er zijn ook andere bedrijven (zoals TypeTone) die een product van hogere kwaliteit bieden en niet plagiëren.
Terwijl een persoon zou kunnen plagiëren door stukken tekst uit een paar verschillende bronnen te halen, plagiëren AI-bots van mindere kwaliteit doorgaans door kleine stukjes tekst uit veel verschillende bronnen te kopiëren. Maar wanneer die kleine geplagieerde stukjes bij elkaar opgeteld worden, kan alsnog een groot deel van de tekst geplagieerd zijn. En hoewel we hebben vastgesteld dat een hoge AI-score niet veel betekent, is een hoge plagiaatscore een serieus probleem in de meeste academische en werkomgevingen.
Onthoud: een lage score betekent niet goed geschreven
Denk aan het gezegde: “Dwalen is menselijk.” Mensen maken fouten, en AI-detectors weten dit. Dat betekent dat als een paper vol staat met grammaticale fouten en onhandig geformuleerde tekst, dit juist een betere score van de AI-detectors kan opleveren. Soms wordt tekst die grammaticaal correct is, juist eerder gemarkeerd als door AI geschreven.
AI is door mensen gemaakt, en dat betekent soms dat het menselijke vooroordelen bevat. AI-detectors zijn er bijvoorbeeld van beschuldigd strenger te oordelen bij het scannen van content die is geschreven door mensen die Engels als tweede taal spreken. Mensen die geen Engelse moedertaalspreker zijn, schrijven mogelijk in een internationalere, neutralere vorm van Engels die minder leunt op straattaal en lokale uitdrukkingen. AI-detectors zouden dit kunnen markeren als waarschijnlijker door ChatGPT geschreven.
Als je software gebruikt om je te helpen bij het proeflezen en controleren van je grammatica, zoals Grammarly, dan is de kans groter dat je tekst als AI-geschreven wordt gemarkeerd, om veel van dezelfde redenen als hierboven genoemd.
In die zin kan het lijken alsof AI-detectors schrijven juist afstraffen omdat het grammaticaal correcter is. Onthoud dus deze mentale notitie: een lage AI-score betekent niet gelijk goed geschreven, en een hoge AI-score betekent niet gelijk slecht geschreven.
Niet alle AI-programma’s zijn gelijk
Bij TypeTone erkennen we het belang van het tot uitdrukking brengen van de uniciteit van jouw toon en stem. Kunstmatige intelligentie hoeft geen ongecreatieve, geplagieerde, onnauwkeurige content te produceren. Onze digitale medewerkers en chatbot zijn volledig afgestemd op de modernste EU-technologieregels, en we tonen een toewijding aan kwaliteit die verder gaat dan holle beloftes.
Typetone biedt AI-medewerkers en een AI-chattool die perfect zijn voor moderne marketingteams. Onze AI-software is gewoon beter–hij is veilig, houdt zich aan de regels (AVG-compliance, check!) en past perfect bij jouw merk.
Probeer Typetone Chat en ontdek hoe het jouw marketingdoelen naar een hoger niveau kan tillen. Plan een demo vandaag nog!
Dataprivacy gewaarborgd