Qu'est-ce que GPTZero? Comment l'utiliser pour détecter le texte généré par l'IA

Depuis son lancement, ChatGPT d'OpenAI est devenu une préoccupation pour les établissements d'enseignement du monde entier, car les étudiants ont commencé à l'utiliser pour rédiger des dissertations et tricher aux évaluations. Étant donné l'aspect naturel du texte généré par le chatbot, les instructeurs ont plus de mal à déterminer si le travail des étudiants est original.

Pour aider les enseignants à évaluer les devoirs des étudiants, un diplômé en informatique a développé un outil nommé GPTZero, qui détermine si un texte a été généré artificiellement. Cet article explique comment l'outil fonctionne, comment l'utiliser et s'il peut détecter le contenu généré par l'IA.

Qu'est-ce que GPTZero et comment ça marche?

GPTZéro est un outil d'analyse de texte IA développé par Edward Tian, ​​diplômé en informatique, pour aider les instructeurs à distinguer le texte plagié de l'œuvre originale. L'outil vérifie la perplexité et l'éclatement d'un texte pour déterminer s'il est généré artificiellement ou fabriqué par un humain.

Sans entrer dans les détails, regardons ce que signifient ces termes :

• Perplexité est une mesure du caractère aléatoire du texte dans le traitement du langage naturel (TAL). Un texte écrit par un humain a tendance à être moins structuré et plus imprévisible, donc sa valeur de perplexité devrait être plus élevée, alors qu'un texte généré par l'IA devrait avoir un score de perplexité faible.
• Éclat prend en compte d'autres variables non prises en compte dans la perplexité pour améliorer l'analyse de texte. Le terme fait référence à l'apparition d'éléments non communs dans des grappes aléatoires. Le texte généré par l'IA a tendance à avoir une structure plus cohérente que le texte écrit par des humains. La rafale nous aide à identifier cela.

GPTZero Classic est accessible au public depuis début 2023 et son utilisation est gratuite depuis mars 2023. Cependant, la version gratuite a une limite de caractères de 5000 par document et vous ne pouvez analyser par lots que trois documents à la fois.

GPTZero propose deux versions premium pour satisfaire les besoins des éducateurs et des utilisateurs qui souhaitent analyser des millions de mots par mois: GPTZero Educator et GPTZero Pro. La limite de caractères par document est plus élevée dans les versions premium que dans la version gratuite, et elles vous permettent d'analyser un nombre illimité de fichiers en mode batch.

Suivez ces étapes pour vous abonner à ces versions premium :

1. Aller à Tableau de bord GPTZéro.
2. Connectez-vous avec votre compte existant ou créez un nouveau compte.
3. Après vous être connecté, vous pouvez passer à une version premium de votre choix.

Comment utiliser GPTZero pour détecter le texte généré par l'IA

Contrairement à ChatGPT, aucune inscription n'est requise sur GPTZero. Vous pouvez simplement accéder à l'outil via le site Web. Voyons comment vous pouvez y accéder et l'utiliser :

1. Aller à GPTZéro.
2. Copiez et collez le texte que vous souhaitez analyser dans la boîte ou téléchargez un fichier.
3. Cochez la case à côté J'accepte les conditions d'utilisation.
4. Clique sur le Obtenir des résultats boîte.

À la fin de l'analyse, GPTZero vous dira si le texte a été écrit par un humain ou généré par l'intelligence artificielle.

GPTZero peut-il reconnaître correctement le texte généré par l'IA?

Pour tester la précision avec laquelle GPTZero détecte le texte généré par l'IA, nous analyserons trois textes dans l'outil: texte généré par l'IA, texte écrit par un humain et texte généré par l'IA qui a été paraphrasé par un autre outil. Voyons comment GPTZero répond à chaque entrée.

Nous inclurons les instructions sur la façon dont nous avons effectué ces tests afin que vous puissiez les exécuter vous-même.

1. L'analyse du texte généré par l'IA dans GPTZero

Pour analyser le texte généré par l'IA, générons d'abord le texte à l'aide de ChatGPT, un chatbot IA alimenté par la technologie GPT. Pour ce faire, suivez ces étapes :

1. Aller à OpenAI.
2. Clique sur le Essayez ChatGPT bouton.
3. Connectez-vous ou créez un compte.
4. Entrez n'importe quelle invite pour générer un texte.
5. Copiez le texte généré par l'outil une fois celui-ci terminé.
6. Analysez le texte dans GPTZero, comme nous l'avons expliqué précédemment.

Vous pouvez également utiliser d'autres Outils d'écriture IA pour générer le texte que vous souhaitez analyser.

GPTZero a renvoyé le résultat suivant lorsque nous avons analysé le texte généré par l'IA dans l'outil :

Étant donné que le texte a été généré par l'IA, GPTZero a correctement prédit qu'il est susceptible d'avoir été généré par l'IA. Pour rendre le test plus difficile, nous avons paraphrasé le texte généré par ChatGPT.

2. L'analyse d'un texte généré par l'IA paraphrasé dans GPTZero

Vous pouvez choisir parmi des centaines de outils de paraphrase pour paraphraser le texte. Pour ce cas, nous avons utilisé Scribbr. Si vous souhaitez utiliser le même outil, suivez les étapes :

1. Aller à Scribbr.
2. Copiez le texte généré par l'IA que nous avons analysé précédemment dans GPTZero et collez-le dans l'outil.
3. Clique sur le Paraphrase bouton.
4. Laissez Scribbr paraphraser le texte pour vous.
5. Exécutez à nouveau le test GPTZero après avoir paraphrasé.

Voici la sortie de GPTZero lorsque nous avons analysé le texte généré par l'IA paraphrasé :

Une légère paraphrase a rendu difficile pour GPTZero de déterminer si le texte est entièrement généré par l'IA.

3. L'analyse du contenu écrit humain dans GPTZero

Dans certains cas, des outils comme GPTZero renvoient un faux résultat positif, ce qui signifie qu'ils considèrent que quelque chose est incorrect alors que ce n'est pas le cas. Pour déterminer si GPTZero donne également des faux positifs, nous avons effectué trois tests dans l'outil, en analysant trois textes différents écrits par des humains.

Sur ces trois tests, l'outil a renvoyé un faux positif en indiquant qu'un texte original avait été généré par l'IA; une fois, il n'a pas réussi à tirer de conclusion, et une fois, il a correctement identifié le texte comme écrit par un humain.

Si vous souhaitez tester un contenu écrit par un humain, vous pouvez soit le copier à partir d'une source authentique, soit rédiger vous-même quelques paragraphes.

Devriez-vous faire confiance aux résultats de GPTZero?

D'après nos tests, se fier uniquement aux résultats de cet outil peut être risqué. En fait, une clause de non-responsabilité apparaît chaque fois que vous générez un résultat à l'aide de l'outil, ce qui avertit les enseignants de ne pas se fier aux résultats de cet outil.

Ainsi, à moins que le développeur de l'outil ne garantisse que ses résultats sont infaillibles, les éducateurs ne devraient pas s'y fier entièrement. Pourquoi? Parce qu'il serait injuste qu'un étudiant reçoive une mauvaise note simplement parce que GPTZero a renvoyé un faux positif.

Les tests ci-dessus ont été effectués en février 2023. GPTZero est un outil relativement nouveau pour le moment, sa précision peut donc changer avec le temps.

Ne faites pas toujours confiance aux résultats de détection de l'IA

En tant qu'antidote potentiel à la technologie GPT d'OpenAI, GPTZero a un grand potentiel; cependant, il en est encore à ses balbutiements. À ce stade, ce n'est pas entièrement fiable. Mais la version principale de GPTZero pourra-t-elle surmonter toutes les limitations et capturer le contenu de l'IA avec précision? Pour le savoir, nous n'aurons qu'à patienter.

En plus de donner aux étudiants une autre raison de tricher aux évaluations, ChatGPT constitue également une menace sérieuse pour la cybersécurité.