El detector de contenidos IA Compilatio permite distinguir entre textos humanos y textos generados por Inteligencias Artificiales para verificar la autenticidad de los escritos.
1. ¿Cómo mide la fiabilidad del sistema Compilatio para detectar textos escritos por la IA?
La eficacia de la detección de contenidos mediante IA se basa en:
La capacidad del motor de detección etiquetar como "IA" o "humano" cada uno de los extractos de texto uniforme que se le presente (texte homogéneo = texto enteramente generado por IA o texto enteramente escrito por un humano).
Capacidad de recopilación y análisis identificar en un documento heterogéneo pasajes atribuibles a un autor humano o de IA (texto heterogéneo = texto que contiene una mezcla de texto escrito por un humano y texto generado por IA).
Nota: Las mediciones de rendimiento ofrecidas en este artículo son válidas para el sistema de detección de texto Compilatio IA versión 4.5.3, en uso desde el 4 de septiembre de 2025.
2. Fiabilidad del motor de detección de texto
El papel del motor de detección: etiquetar breves fragmentos de texto como "IA" o "humano".
El motor de detección de Compilatio utiliza un modelo lingüístico (una inteligencia artificial especializada en el tratamiento del lenguaje) específicamente formados para determinar si un texto es similar a algo producido por una IA o por un humano.
Este "motor de detección" recibe textos de fuentes desconocidas y determina, en función del estilo de redacción que son similares a los textos escritos por humanos y a los escritos por inteligencia artificial.
Medidas de fiabilidad del motor de detección
Para obtener una visión completa de la fiabilidad necesitamos medir varios indicadores precisión, recuperación y exactitud. Para comprender mejor cómo se calculan estos indicadores, consulte los siguientes artículos: "Precisión y recuperación" y "Exactitud y precisión".
El motor de detección Compilatio alcanza una tasa de confiabilidad del 94 al 99% en contenidos académicos, según la longitud del documento, el idioma y la naturaleza del contenido analizado.
El motor de detección Compilatio muestra una tasa de falsos positivos inferior al 1%.
Esto significa que de 100 fragmentos identificados como redactados por un humano, menos de 1 es incorrectamente identificado como generado por IA.
Estas mediciones se realizaron en aproximadamente 7.400 textos en 24 idiomas. La muestra estuvo constituida por 3.700 textos redactados por humanos y 3.700 textos redactados por Inteligencia Artificial.
Las preguntas formuladas a la IA para generar los textos eran preguntas simples sin instrucciones específicas sobre estilo de escritura.
3. La fiabilidad de Compilatio
La tarea realizada por Compilatio al analizar un documento no se limita a determinar si un texto es atribuible al 100% a la IA o al 100% a un humano (como hace el motor de detección).
El papel del análisis es identificar y cuantificar, dentro de un documento heterogéneo (una mezcla de texto escrito por humanos y generado por IA), los pasajes que probablemente pertenezcan a cada fuente.
Esta tarea es intrínsecamente más compleja de medir con un indicador único que la del motor de detección. El rendimiento depende de varios factores propios de cada documento: el número de pasajes a etiquetar, su longitud respectiva y la proporción de la mezcla humano/IA. A diferencia de la prueba del motor de detección (realizada sobre un corpus controlado y homogéneo), cada documento heterogéneo presenta una configuración diferente, lo que hace que una cifra única sea poco representativa de la realidad.
Por ello recomendamos referirse a la tasa de fiabilidad del motor de detección (del 94 al 99%, según el idioma, la longitud del documento y el tipo de contenido) como indicador de referencia, y considerar el análisis de documentos heterogéneos como una herramienta de apoyo a la decisión más que como una puntuación de rendimiento aislada.
La ilustración a continuación muestra un ejemplo representativo de cómo el análisis identifica los pasajes dentro de un documento mixto:
4. Precauciones que deben tomarse en relación con las medidas de eficiencia
Las estadísticas facilitadas describen la rendimiento general servicio sobre un gran número de documentos que representan el trabajo de los estudiantes.
En la práctica, las fuentes (IA o humano) de determinados pasajes/documentos pueden identificarse perfectamente, y otras no tanto. Hay que tener en cuenta que la detección de IA se basa en el reconocimiento de las características estilísticas típicas de los textos escritos por una IA; puede ocurrir que un humano tenga un estilo similar al de una inteligencia artificial.
Ningún detector AI puede ser fiable al 100%.
Los índices de fiabilidad comunicados por los detectores de IA no son comparables. Es difícil comparar objetivamente la fiabilidad de las herramientas de detección de IA si los entornos de prueba difieren.
Las mediciones pueden cambiar en función de varios factores: origen e idioma del corpus, número de documentos probados, modelo generativo de IA utilizado, origen de los documentos humanos, compromiso de la empresa de no manipular los resultados, etc.
Es importante recordar que las herramientas de Compilatio proporcionan indicaciones en pasajes sospechosos. Corresponde siempre al examinador interpretar esta información para validar o imputar un posible fraude. En caso de duda, realice un examen más exhaustivo de los conocimientos del alumno sobre los pasajes sospechosos.
Para saber si nuestras soluciones son adecuadas para usted, póngase en contacto con nuestros consejeros.
5. ¿Es multilingüe el detector de IA Compilatio?
Sí, el detector de IA Compilatio es multilingüe. Puede identificar contenidos de IA en varios idiomas: francés, inglés, español, italiano, portugués, ruso, árabe, hindi y otros idiomas de todo el mundo.
Se han realizado mediciones de fiabilidad en textos de 24 lenguas: alemán, árabe, checo, croata, danés, eslovaco, esloveno, español, finés, francés, griego moderno, hindi, húngaro, inglés, italiano, noruego, neerlandés, polaco, portugués, rumano, ruso, serbio, sueco y ucraniano.
¿Se adaptará el detector de IA Compilatio a los constantes avances de la IA?
Lea la respuesta aquí: https://support.compilatio.net/hc/es/articles/1743577340532
|
* Recordatorio: El detector Compilatio AI está disponible con la suscripción Compilatio Magister+. Para más información, visite nuestro sitio web: https://www.compilatio.net/es/magister-plus |
Este artículo ha sido traducido automáticamente. Si detecta algún error en la traducción, póngase en contacto con nosotros.