Según Pangram, 'Donde el agua trabaja' de David Silva Rojas es IA al 99%. El problema es el de siempre: que una IA no es infalible

La novela 'Donde el agua trabaja' se alzó en julio con el primer Premio Internacional de Novela Breve Almadía Ventosa-Arrufat, por delante de más de 2.200 escritos llegados de 22 países y dotado con 20.000 euros. En sus bases, una condición meridianamente clara: participar implicaba declarar que la obra no se había escrito, ni parcial ni totalmente, con herramientas de IA. Ante cualquier indicio o sospecha, la obra quedaría descalificada independientemente de la fase del proceso. 

Pues bien, tras su publicación en septiembre y en plena presentación en España, al autor peruano David Silva Rojas, a la editorial y el jurado del concurso (que elogió el uso de sus silencios y su construcción) les ha salpicado el escándalo: El País ha destapado que, tras pasar el libro entero por el detector Pangram, la novela premiada contiene un 99% de texto generado por una IA.

Qué es Pangram y qué promete. Antes de nada, las presentaciones: Pangram es un clasificador de texto basado en redes neuronales que intenta distinguir si un texto está hecho por un humano o por un modelo de lenguaje. Bajo el capó, una técnica de entrenamiento diseñada para reducir los falsos positivos y que, según sus autores, no discrimina a los hablantes no nativos de inglés, usa prompts espejo y, además discierne por secciones.

Pangram Labs, la empresa que está detrás y principal interesada en que su detector sea fiable y además, lo parezca, habla de un 0,0041 % de falsos positivos y un 0,34 % de falsos negativos. Un estudio independiente de la universidad de Chicago comparó Pangram con otros detectores comerciales y llegó a una conclusión: Pangram es menos propenso que el resto a la hora de clasificar texto humano como IA.