1. L’analyse Compilatio Magister+ : plusieurs indicateurs composent le pourcentage de textes suspects
Grâce à la solution Compilatio Magister+, les enseignants peuvent détecter les textes suspects dans les documents des étudiants. Compilatio Magister+ met en avant divers pourcentages suite à l’analyse d’un document :
- un pourcentage général de textes suspects
-
la composition des textes suspects selon le type de détection :
- un score de similitudes
- un score de langues non-reconnues
- un score de contenus potentiellement générés par IA
2. Focus sur le pourcentage de textes potentiellement générés par IA
Dans cet article, nous nous intéressons au score des contenus potentiellement générés par IA.
Le score de textes potentiellement générés par IA est un pourcentage compris entre 0 et 100 %, qui indique la probabilité qu'un texte ait été généré par un outil d’IA générative tel que ChatGPT, Gemini, YouChat… Ce pourcentage correspond à la proportion de texte du document dont le style s’apparente à celui que pourrait avoir un outil d’IA générative.
Par exemple, pour un document de 1000 mots et un pourcentage de textes potentiellement générés par IA de 10%, cela signifie que 100 mots ont un style similaire à ceux présents dans un texte qui serait généré par une IA. Il appartient ensuite à l'utilisateur-correcteur de distinguer si ces passages relèvent de plagiat ou non. Le logiciel Compilatio Magister+ est un outil d’aide à la décision : il ne remplace pas le correcteur dans sa capacité à évaluer les compétences des étudiants et ne juge pas de la qualité d’un devoir ni de l'adéquation avec les attentes de l’établissement par exemple…
3. Comment fonctionne le détecteur d'IA Compilatio ?
Notre détecteur de contenus potentiellement générés par IA est lui-même basé sur une intelligence artificielle, ayant été entraînée à reconnaître les styles d’écriture des outils d’IA génératives de textes. En utilisant un grand modèle de langage (Large Language Model ou LLM), il est capable de saisir le contexte, le ton et les aspects culturels du langage pour repérer ensuite les subtilités dans les textes.
Cette technologie et l’entraînement du module de détection des contenus IA Compilatio, nous permet de mettre en évidence les textes présentant un style s’apparentant à celui qu’un robot peut générer dans le document analysé par Compilatio Magister+.
4. Pourquoi Compilatio indique “textes potentiellement générés par IA” ?
Dans l’interface et les rapports de résultats Compilatio Magister+, l’indicateur mentionné est un pourcentage de “ textes potentiellement générés par IA” et non pourcentage de “textes générés par IA”. Cette précaution dans l’analyse est indispensable pour les raisons suivantes.
- Les analyses faites par Compilatio Magister+ ne fournissent pas de preuve objective de l'utilisation d'IA générative de texte dans un document. Si pour la détection de similitudes le logiciel Compiatio Magister+ met en avant la preuve de ressemblance grâce à la vue face à face, le logiciel ne peut pas apporter une telle preuve visuelle pour la détection de passages générés par IA.
Pour en savoir plus, consultez l’article “Le détecteur d'IA Compilatio fournit-il une preuve objective de l'utilisation d'IA générative de texte dans un document ?” - Aucun logiciel de détection de textes IA ne peut prétendre une fiabilité égale à 100%.
Pour en savoir plus, consultez l’article “Le détecteur d'IA Compilatio est-il fiable ?”
5. Les bons réflexes en cas de pourcentage de textes potentiellement générés par IA élevé
Quand l’analyse met en avant un score des contenus potentiellement générés par IA élevé, il est important de :
- ne pas sanctionner / formuler d’accusation avant confrontation avec l’étudiant ;
- aller consulter plus en détail les passages concernés, grâce à la page “Point d’intérêts” ;
-
se questionner et se positionner sur ce qui est acceptable ou non au regard du règlement de l’établissement, des consignes données, de vos attentes… ;
Source : Ecole Branchée, L'IA à l'école : qu'est-ce qu'il est de la triche, qu'est-ce qui est correct?
- garder en tête les consignes données aux étudiants en amont du rendu (peut-être que l’utilisation de l’IA était autorisée/demandée pour ce devoir) ;
- voir si l’étudiant a mentionné l’usage d’IA génératives et en comprendre les raisons ;
- confronter l’étudiant, pousser l’évaluation de ses connaissances réelles, à l’oral pour exemple. La présence de textes générés par IA dans un travail d’étudiant ne veut pas dire que l’étudiant n’a pas les compétences visées et n’est pas capable de développer son sujet/domaine d’études ;
- sensibiliser de manière continue aux bons usages des IA génératives pour aider les étudiants dans leurs rédactions, leur apprendre les bonnes pratiques pour garantir l’intégrité académique.
Pour aller plus loin :
- Présentation du savoir-faire technique Compilatio pour identifier les textes artificiels. Détecteur d'IA Compilatio : c'est quoi ? Comment ça marche ? Est-ce fiable ? Quels résultats ? Pourquoi choisir Compilatio ? Pour qui ?
- Présentation de l’offre Compilatio Magister+ qui permet notamment de détecter les textes potentiellement générés par IA.
- Le Compilatio GPT “Scénario d’évaluation complémentaire d’un étudiant”. Lorsque le travail d’un étudiant contient des passages identifiés par Compilatio Magister+ comme “copiés” ou “potentiellement générés par IA”, un doute apparaît sur la maîtrise de ces notions par l’étudiant. Alors, Compilatio met à disposition un GPT qui permet de générer automatiquement un protocole de vérification : une IA entraînée à proposer une liste de questions à poser à l’étudiant pour confirmer sa maîtrise du sujet relative aux zones de textes suspects. ChatGPTPLUS requis pour y accéder : https://compilatio.link/gpt-inquiry-assistant .
📌 Des questions sur Magister, Magister+, le plagiat ou l'IA ?
Obtenez des réponses en direct lors de notre Webinar "Questions & Réponses".
👉 Inscrivez-vous à la prochaine session