Turnitin détecte l'IA ? - Scores, marche & rapports
Salut ! Vous êtes-vous déjà demandé comment Turnitin surveille le contenu généré par l'IA dans vos documents ?
Que vous soyez un étudiant qui travaille d'arrache-pied sur un mémoire ou un enseignant qui cherche à maintenir l'équité, il est essentiel de comprendre les outils de Turnitin.
Alors, examinons le fonctionnement de ce système ingénieux, ce qu'il peut détecter et qui a accès à quoi. C'est parti !
Turnitin détecte-t-il l'IA ?
Oui, Turnitin est capable de détecter les contenus générés par l'IA et de produire un rapport. Cette fonctionnalité a été intégrée aux services de Turnitin depuis le 4 avril 2023, garantissant que tous les travaux soumis via la plateforme sont vérifiés non seulement pour le plagiat, mais aussi pour la présence de contenus générés par l'IA.
Qui a accès au rapport de détection de l'IA ?
L'accès aux rapports de détection de l'IA dépend de l'activation de cette fonctionnalité par l'établissement ou l'enseignant. En général, ces rapports, qui comprennent un score d'IA indiquant la probabilité que le contenu ait été généré par l'IA, ne sont pas visibles par les étudiants. Ils sont habituellement réservés aux enseignants, qui peuvent ensuite choisir d'utiliser ces informations pour orienter leurs actions ou discussions concernant l'intégrité académique.
Vous êtes curieux de savoir ce que votre enseignant voit lorsqu'il vérifie votre travail sur Turnitin ?
Pas de panique, une solution existe si vous souhaitez connaître tous les détails concernant votre devoir. Des services comme "T-detector" sont là pour vous aider ! Grâce aux données officielles de Turnitin, ce service vous permet de visualiser exactement ce que voit votre enseignant. Vous obtenez un rapport incluant à la fois le pourcentage de similarité et les résultats de la détection de l'IA. C'est un outil précieux pour tout étudiant souhaitant approfondir sa compréhension, analyser ses résultats et peaufiner ses travaux avant de les soumettre.
Qui peut accéder au détecteur d'IA de Turnitin ?
Seuls les utilisateurs disposant d'une licence Turnitin Originality peuvent accéder à la détection de rédaction par IA. Si vous utilisez Turnitin Similarity, Feedback Studio ou Originality Check, vous devrez discuter des options d'accès avec votre responsable de compte Turnitin. Les utilisateurs d'iThenticate 2.0 peuvent également ajouter cette fonctionnalité en contactant leur responsable de compte.
À partir du 1er janvier 2024, la détection de rédaction par IA sera exclusivement disponible via la licence Originality. Sans cette licence, les utilisateurs n'auront pas accès aux scores et rapports d'IA, même pour les soumissions antérieures. Cependant, les établissements disposant de l'extension Originality peuvent consulter les données d'IA sur toutes les soumissions.
La détection de l'IA est disponible dans les rapports de similarité sur les plateformes LMS comme Moodle, Blackboard et Canvas, bien que les utilisateurs doivent accéder au rapport complet pour voir les détails liés à l'IA.
Comment fonctionne l'indicateur d'IA de Turnitin
Aperçu
Lorsqu'un document est soumis à Turnitin, le système commence son analyse en segmentant le texte en blocs d'environ cinq à dix phrases chacun.
Ces segments sont intentionnellement chevauchés pour garantir que chaque phrase est analysée dans son contexte plus large. Le modèle de détection de l'IA de Turnitin évalue ensuite chaque phrase sur une échelle de 0 à 1, où 0 indique une phrase probablement écrite par un humain et 1 suggère qu'elle a été générée par l'IA.
Une moyenne de ces scores à travers le document est calculée pour fournir une prédiction globale de la mesure dans laquelle le texte peut avoir été généré par l'IA.
Modèles d'IA détectables
Les capacités de détection de l'IA de Turnitin incluent actuellement :
GPT-3 et GPT-3.5 : Il s'agissait des modèles initiaux sur lesquels Turnitin s'est concentré, reconnaissant le texte généré par des outils basés sur ces technologies, tels que ChatGPT.
GPT-4 : Après des tests approfondis, Turnitin a confirmé que son système peut souvent détecter le texte produit par GPT-4, également appelé ChatGPT Plus.
Plans d'expansion : Turnitin travaille activement à inclure des modèles supplémentaires comme GPT-4o et LLaMA dans ses capacités de détection, reflétant l'évolution et le développement continus des grands modèles linguistiques (LLM).
Capacités de détection
Le détecteur d'IA de Turnitin est spécialement conçu pour identifier :
Contenu généré par l'IA : Cela inclut la génération directe de texte par l'IA, où le texte est entièrement produit par une IA.
Contenu paraphrasé par l'IA : Cela implique un texte qui a été initialement généré par l'IA, puis modifié par des outils de paraphrase d'IA, tels que Quillbot, l'outil de paraphrase de Grammarly et Scribbr. Cette capacité améliore la capacité du système à détecter les textes qui ont été subtilement modifiés pour échapper à la détection.
Indicateurs et rapports
Dans le rapport sur la rédaction d'IA, Turnitin utilise un code couleur pour mettre en évidence différents types d'implication de l'IA, aidant ainsi les instructeurs à interpréter efficacement les résultats.
Le modèle de Turnitin est calibré pour garantir un taux de précision élevé, signalant le contenu comme généré par l'IA uniquement lorsqu'il y a au moins 98 % de certitude. Ce seuil strict aide à minimiser les faux positifs, bien qu'il soit reconnu que jusqu'à 15 % du texte écrit par l'IA pourrait ne pas être détecté.
Intégration LMS
Les capacités de détection de l'IA de Turnitin sont intégrées aux systèmes de gestion de l'apprentissage (LMS) tels que Moodle, Blackboard et Canvas via le rapport de similarité. Cependant, les indicateurs spécifiques de rédaction d'IA ne sont pas intégrés directement dans les interfaces LMS ; au lieu de cela, les utilisateurs doivent accéder au rapport détaillé pour afficher le score d'IA.
Considérations relatives aux biais
Reconnaissant le potentiel de biais, en particulier à l'égard des apprenants de langue seconde ou des domaines moins courants, Turnitin a conçu son modèle de détection de l'IA en mettant l'accent sur l'équité. Le développement du modèle a pris en compte la nécessité de minimiser tout désavantage pour les groupes sous-représentés, visant une application équitable dans divers contextes universitaires.
Rapport IA Turnitin : score, indicateurs visuels et pourcentage
Dans le Rapport de similarité Turnitin, la section Rapport IA détaille deux scores :
Texte généré par l'IA : Ce score indique les passages provenant probablement d'un outil d'IA, notamment un grand modèle linguistique (LLM).
Texte paraphrasé par l'IA : Ce score identifie les passages qui semblent avoir été générés par l'IA, puis modifiés par des outils de reformulation tels que Quillbot.
Indicateurs visuels dans le rapport
Turnitin utilise un code couleur pour signaler les différentes formes d'utilisation de l'IA :
Surlignage cyan : Indique un texte probablement généré par l'IA.
Surlignage violet : Signale un texte à la fois généré et paraphrasé par l'IA.
Bleu avec un pourcentage (0-100) : Affiche la proportion du texte soumis qui provient vraisemblablement de l'IA, en particulier dans la rédaction.
Gris (sans pourcentage) : Indique que l'analyse de détection de l'IA n'a pas pu être effectuée, potentiellement en raison d'un type de fichier ou d'une taille incompatible.
Erreur (!) : Signale un problème de traitement. Veuillez réessayer ou vérifier que le fichier respecte les normes.
Pour limiter les faux positifs, les scores inférieurs à 20 % sont interprétés avec prudence :
0 %-19 % (*%) : Ces faibles pourcentages sont indiqués par un astérisque et ne sont pas chiffrés dans le rapport, afin d'éviter de classer à tort un texte rédigé par un humain comme étant généré par l'IA.
Quelle est la limite d'IA autorisée dans Turnitin ?
Turnitin ne fixe pas de limite maximale pour l'utilisation de contenu généré par l'IA. L'outil se contente de détecter et signaler une utilisation significative de l'IA. L'autorisation de l'IA est définie par le règlement de chaque établissement concernant l'intégrité académique. Les étudiants et professeurs doivent donc consulter ces directives pour connaître les conditions d'utilisation de l'IA dans le cadre de leurs travaux.
Distinction entre le score de similarité et la détection de l'IA
Score de similarité : Pourcentage de texte correspondant à des sources de la base de données Turnitin.
Pourcentage de détection de l'IA : Évaluation indépendante de la quantité de texte susceptible d'avoir été générée par des outils d'IA. Ce score est indépendant du score de similarité et se concentre uniquement sur le contenu généré par l'IA.
Gérer les erreurs de détection de l'IA par Turnitin
Le système de détection de l'écriture par IA de Turnitin vise une grande précision, mais il peut se tromper, surtout avec des textes peu variés structurellement ou fortement paraphrasés. Si vous pensez qu'un document a été signalé à tort :
Envoyer des commentaires : Utilisez le bouton de commentaires dans le rapport de détection d'écriture par IA pour informer Turnitin. Cela contribue à améliorer la précision au fil du temps.
Examen contextuel : Pour les documents longs, évaluez la proportion de contenu généré par l'IA par rapport au contenu original. Pour les textes courts, l'approche "tout ou rien" du système peut signaler un contenu mixte comme étant entièrement généré par l'IA.
Jugement de l'enseignant : Les enseignants doivent utiliser les résultats de la détection de l'IA en complément d'autres évaluations et discussions avec les étudiants afin de garantir une évaluation juste de leur travail, en tenant compte des limites du modèle pour différencier l'IA du texte rédigé par un humain.
FAQ
La détection d'IA de Turnitin est-elle gratuite ?
Non, Turnitin commencera à facturer ses services de détection de contenu rédigé par IA à partir de janvier 2024.
La détection d'IA peut-elle analyser des documents déjà soumis ?
Oui, vous pouvez vérifier si des devoirs déjà soumis contiennent du contenu généré par IA, à condition qu'ils soient resoumis pour analyse et que la détection d'IA soit activée dans votre compte.
Quelles langues sont prises en charge par Turnitin ?
Actuellement, la détection d'IA de Turnitin fonctionne pour les documents en anglais et, à partir de septembre 2024, en espagnol pour les textes longs. Cependant, la détection de contenu paraphrasé par une IA n'est disponible que pour les soumissions en anglais.
Comment masquer le rapport d'IA ?
Les administrateurs peuvent désactiver la fonctionnalité de détection d'IA dans les paramètres du compte Turnitin, ce qui masquera le rapport d'IA dans les résultats.
La technologie de détection d'IA va-t-elle évoluer ?
Oui, Turnitin améliorant constamment son modèle, les capacités de détection et les pourcentages d'IA sont susceptibles de changer. Toutefois, le pourcentage d'IA associé à un document restera inchangé, sauf si celui-ci est resoumis pour analyse.
Turnitin identifie-t-il les textes modifiés par Grammarly comme étant de l'IA ?
En général, le détecteur de Turnitin n'identifie pas comme étant générés par IA les textes ayant subi des corrections d'orthographe, de grammaire ou de ponctuation par Grammarly. Cependant, les contenus produits à l'aide des fonctions de génération de texte de Grammarly basées sur l'IA (telles que la rédaction ou la reformulation) seront probablement considérés comme ayant été générés par une IA.
Conclusion
En résumé, Turnitin a de solides capacités pour détecter le contenu généré par l'IA, fournissant des outils essentiels pour maintenir l'intégrité académique.
Alors que les instructeurs peuvent examiner en détail les rapports, les étudiants devront peut-être chercher ces informations ailleurs.
N'oubliez pas que l'efficacité de Turnitin dépend vraiment de la façon dont votre établissement l'utilise. J'espère que vous avez trouvé cette analyse utile - merci de votre attention !