¿Se puede saber si un texto está escrito con IA? Por qué los detectores fallan y a quién perjudican | Investigación Especial

Si eres estudiante, docente o editor, la respuesta corta es que no, al menos no de forma fiable con los detectores que analizan el estilo. Los estudios académicos los encuentran poco precisos, fáciles de engañar y sesgados contra quien escribe en un idioma que no es el suyo. La alternativa técnica, las marcas de agua, solo funciona si el generador las incorpora. Aquí tienes qué dicen las pruebas y qué hacer si un detector te señala.

61,22 %. Ese fue el porcentaje medio de redacciones escritas por personas que siete detectores populares etiquetaron como generadas por IA en un estudio de investigadores de la Universidad de Stanford. No eran textos cualquiera: eran ensayos del examen de inglés TOEFL escritos por estudiantes no nativos. Con redacciones de alumnos nativos estadounidenses, los mismos detectores acertaban casi siempre.

Porque muchos detectores no detectan IA: miden lo predecible que es un texto. Un vocabulario limitado y frases de estructura sencilla parecen «demasiado previsibles» para el algoritmo, y eso es exactamente lo que produce quien escribe en un segundo idioma.

El trabajo de Liang y otros, publicado en arXiv en abril de 2023 y después en la revista Patterns, comparó 91 ensayos TOEFL de un foro educativo chino con 88 redacciones de alumnos estadounidenses de octavo curso. Los siete detectores coincidieron en marcar como IA 18 de los 91 ensayos de no nativos (19,78 %), y 89 de 91 (97,80 %) fueron señalados por al menos uno.