Beaucoup de détecteurs d’IA prétendent pouvoir indiquer, avec un certain niveau de précision, si un texte a été écrit par un humain ou par un logiciel d’intelligence artificielle.
Cependant, ces détecteurs sont plutôt controversés. Certains affirment qu’ils ne fonctionnent pas, et d’autres vont même jusqu’à les qualifier d’arnaque.
Pourtant, des présidents d’université, des responsables marketing, des enseignants et bien d’autres ont sanctionné des personnes pour avoir rédigé du contenu signalé par des détecteurs d’IA. Alors, sont-ils vraiment utiles ?
Qu’est-ce qu’un détecteur d’IA, exactement ?
Un détecteur d’IA est un outil logiciel conçu pour identifier le contenu généré par des systèmes d’intelligence artificielle (IA). Concrètement, il fait la distinction entre le contenu créé par des humains et celui généré par des algorithmes d’IA comme ChatGPT.
Comment fonctionnent les détecteurs d’IA ?
Les détecteurs d’IA ressemblent beaucoup aux logiciels anti-plagiat. Ils attribuent un score en pourcentage : 0 % signifie qu’il y a 0 % de chances que le texte ait été écrit par une IA. 100 % signifie que le détecteur est sûr à 100 % que le texte a été écrit par une IA.
Ainsi, en matière de détecteurs d’IA, on recherche des scores bas.
Ce modèle en pourcentage peut être trompeur. Un score de 40 % pourrait laisser penser que 40 % de l’article a été écrit par une IA, alors qu’en réalité, cela signifie simplement que le programme n’est sûr qu’à 40 % que le texte a été écrit par une IA. (Et qu’est-ce que cela signifie ? Pas grand-chose, en réalité.) Certains détecteurs d’IA vont même jusqu’à surligner certaines portions de texte, comme si c’étaient les parties écrites par l’IA.
Par exemple, un enseignant ayant déjà utilisé des logiciels anti-plagiat pourrait s’inquiéter de ces pourcentages, car si un devoir est plagié à 40 %, cela justifierait une sanction disciplinaire. Mais un score de 40 % sur un détecteur d’IA peut rester flou et subjectif.
Exemples de détecteurs d’IA
Voici quelques exemples de sites web qui prétendent pouvoir détecter les textes rédigés par IA :
- Originality.ai
- Undetectable.ai
- GPTZero
- Quillbot
Les détecteurs d’IA sont-ils fiables ?
Voici une capture d’écran d’un résultat de détection d’IA provenant d’Originality.ai, qui affirme sur sa page d’accueil avoir une « précision de détection IA de 99 % ».
Le programme est certain à environ 70 % que le texte a été écrit par une IA, ce qui signifie qu’il y a de fortes chances que le texte ait été écrit par un logiciel d’IA. Une personne ayant écrit ce texte pourrait avoir des ennuis à l’école ou au travail à cause d’un score d’IA aussi élevé.
Il y a juste un problème : le texte qu’Originality.ai a analysé « avec 99 % de précision » sur la photo correspond aux 100 premiers mots de L’Art de la guerre de Sun Tzu, rédigé au cinquième siècle avant Jésus-Christ. On peut donc être sûr à 100 % qu’il n’a pas été écrit par ChatGPT.
Cela nous amène à la question centrale : les détecteurs d’IA sont-ils précis ? Non.
OpenAI a confirmé que les détecteurs d’IA ne fonctionnent pas. L’université de Cornell a publié une étude soulignant que les détecteurs d’IA sont biaisés à l’encontre des personnes dont l’anglais n’est pas la langue maternelle. Pourtant, des professeurs d’université ont fait échouer des classes entières d’étudiants parce que ChatGPT revendiquait la paternité de leur travail lorsqu’on le lui demandait.
Cela dit, certains affirment que les détecteurs d’IA ont une certaine crédibilité, mais qu’ils n’offrent simplement pas de réponses aussi tranchées qu’elles peuvent le paraître.
Ces logiciels ont tendance à afficher un faible taux de faux négatifs, mais un taux élevé de faux positifs. Autrement dit, si un logiciel de détection d’IA indique qu’un texte n’est pas issu de l’IA, vous pouvez être relativement sûr que ce n’est effectivement pas le cas. Mais s’il indique qu’un texte est issu de l’IA, cela ne signifie souvent pas grand-chose. Et si quelqu’un vous accuse d’avoir utilisé l’intelligence artificielle parce que vous avez obtenu un pourcentage élevé sur un détecteur d’IA, demandez-lui s’il applique la même logique à Sun Tzu.
Alors, comment savoir si un rédacteur ou un étudiant utilise l’IA pour écrire ?
Regardez les horodatages de Google Docs
Si vous voulez vraiment savoir si quelqu’un utilise l’intelligence artificielle pour rédiger son travail, vous pouvez lui demander d’écrire dans Google Docs et de vous fournir le lien. Vous pourrez ainsi consulter l’historique du document et voir les horodatages pour vérifier combien de temps la rédaction a pris.
Utilisez le plugin Originality.ai (mais ignorez le score d’IA)
Bien que ses résultats de détection d’IA soient inexacts, Originality.ai dispose d’un plugin Chrome qui permet de visionner un enregistrement du processus de rédaction de n’importe quel Google Doc. Vous pouvez ainsi vérifier si quelqu’un a collé un bloc de texte provenant d’une source externe à un moment donné.
Vérifiez le plagiat
Cela dit, vous devriez avant tout vérifier l’exactitude et l’absence de plagiat d’un texte avant de vérifier la présence d’IA. Bien que ChatGPT soit ce qui a fait connaître l’IA au grand public, il commet encore de nombreuses erreurs, comme copier de larges portions de texte provenant de multiples sources sur le web et halluciner des informations. D’autres entreprises (comme TypeTone) proposent un produit de meilleure qualité et ne plagient pas.
Alors qu’une personne pourrait plagier en prenant des extraits de texte de quelques sources différentes, les robots d’IA de moindre qualité ont tendance à plagier en copiant de petits extraits de texte provenant de nombreuses sources différentes. Mais lorsque ces petits fragments plagiés s’accumulent, une grande partie du texte peut tout de même se révéler plagiée. Et bien que nous ayons établi qu’un score d’IA élevé ne signifie pas grand-chose, un score de plagiat élevé constitue un problème sérieux dans la plupart des environnements académiques et professionnels.
À retenir : un score bas ne signifie pas une bonne rédaction
Souvenez-vous du dicton : « L’erreur est humaine. » Les humains font des erreurs, et les détecteurs d’IA le savent. Cela signifie que si un devoir est truffé de fautes de grammaire et de tournures maladroites, il pourrait obtenir un meilleur score auprès des détecteurs d’IA. Parfois, lorsqu’un texte est grammaticalement correct, il a davantage tendance à être signalé comme rédigé par une IA.
L’IA a été créée par des humains, ce qui signifie parfois qu’elle hérite de biais humains. Par exemple, on a accusé les détecteurs d’IA d’être plus sévères lorsqu’ils analysent du contenu rédigé par des personnes dont l’anglais est une langue seconde. Les locuteurs non natifs de l’anglais écrivent parfois dans un anglais plus international et neutre, qui s’appuie moins sur l’argot et les expressions locales. Les détecteurs d’IA pourraient alors signaler ce texte comme plus susceptible d’avoir été écrit par ChatGPT.
Si vous utilisez un logiciel pour vous aider à relire et vérifier votre grammaire, comme Grammarly, votre texte aura également plus de chances d’être signalé comme rédigé par une IA, pour bon nombre des raisons mentionnées ci-dessus.
En ce sens, on pourrait avoir l’impression que les détecteurs d’IA pénalisent en réalité les textes pour leur meilleure correction grammaticale. Retenez donc ceci : un score d’IA bas n’équivaut pas à une bonne rédaction, et un score d’IA élevé n’équivaut pas à une mauvaise rédaction.
Tous les programmes d’IA ne se valent pas
Chez TypeTone, nous reconnaissons l’importance d’exprimer l’unicité de votre ton et de votre voix. L’intelligence artificielle n’a pas à produire un contenu peu créatif, plagié ou inexact. Nos collaborateurs numériques et notre chatbot sont entièrement conformes aux réglementations technologiques européennes les plus récentes, et nous faisons preuve d’un engagement envers la qualité qui va bien au-delà des promesses creuses.
Typetone propose des collaborateurs IA et un outil de chat IA parfaitement adaptés aux équipes marketing modernes. Notre logiciel d’IA est tout simplement meilleur : il est sûr, respecte les règles (conformité RGPD, coché !) et s’accorde parfaitement avec votre marque.
Essayez Typetone Chat et découvrez comment il peut donner un coup de fouet à vos objectifs marketing. Planifiez une démo dès aujourd’hui !
Confidentialité des données garantie