Ilustración de código en un juzgado

Ilustración de código en un juzgado Omicrono

Software

Es oficial: no es en España pero ya ha llegado el primer caso de manipulación judicial con un sabotaje mediante IA

Un juzgado brasileño ha detectado el primer sabotaje con texto oculto para engañar a la IA, imponiendo multas por fraude procesal tecnológico.

Más información: 'AI-pocalipsis' laboral: ¿realidad o espejismo?

Publicada

Recientes sucesos ocurridos en el ámbito de la justicia digital han empezado a llamar la atención de magistrados y abogados tras la aparición del primer caso documentado de sabotaje algorítmico en una demanda judicial.

Este fenómeno ha despertado una señal de alerta global sobre la integridad de los sistemas de inteligencia artificial que asisten a magistrados y abogados en su labor diaria.

El incidente tuvo lugar en un tribunal de Brasil donde se detectó una maniobra técnica diseñada para engañar a los procesadores automáticos de texto de forma intencionada. Un grupo de profesionales del derecho intentó influir en la percepción de la herramienta tecnológica mediante el uso de instrucciones ocultas dentro del cuerpo de la demanda escrita.

La técnica empleada se conoce en el mundo informático como inyección de instrucciones o manipulación de comandos directos para alterar el comportamiento esperado del software.

Consiste fundamentalmente en insertar frases específicas que el ojo humano no puede percibir pero que los sistemas automatizados leen como órdenes prioritarias de ejecución inmediata.

En este caso particular, las abogadas utilizaron una estrategia basada en el cambio de color de la fuente tipográfica para ocultar información relevante a los humanos. Al redactar el documento, incluyeron párrafos enteros en color blanco sobre un fondo del mismo tono, haciéndolos invisibles para cualquier lector de carne y hueso.

Sin embargo, los motores de inteligencia artificial que procesan estos archivos para generar resúmenes o análisis técnicos sí captan cada carácter del documento original sin excepción. Las instrucciones ocultas ordenaban al sistema que ignorase las pruebas presentadas y que emitiera un dictamen superficial favorable a sus intereses procesales particulares.

Esta táctica buscaba que cualquier herramienta de apoyo judicial cayera en una trampa lógica para alterar el curso normal del procedimiento administrativo establecido por ley. El objetivo final era que la contraparte o el propio juzgado recibieran una versión sesgada de los hechos sin saber que la máquina había sido manipulada previamente.

El magistrado encargado del caso en la localidad de Parauapebas identificó rápidamente la anomalía gracias a un proceso minucioso de auditoría técnica del documento electrónico. Al seleccionar el texto y cambiar su color de fondo, quedaron al descubierto los comandos maliciosos que pretendían subvertir la imparcialidad del sistema algorítmico utilizado por el tribunal.

La respuesta judicial ante este intento de engaño tecnológico fue contundente y ejemplarizante para toda la comunidad jurídica internacional que sigue de cerca estos avances. El juez determinó que esta conducta representaba un ataque directo a la dignidad de la justicia y a la buena fe que debe regir en todo proceso legal.

Como consecuencia directa, se impuso una multa solidaria a las profesionales equivalente al 10% del valor total de la causa judicial en cuestión. Además, se notificó de manera formal a los colegios profesionales correspondientes para iniciar los expedientes disciplinarios que el caso amerita por su manifiesta gravedad deontológica y ética profesional.

Este suceso marca un precedente histórico sobre cómo la tecnología puede ser utilizada para fines ilícitos dentro de las salas de vistas modernas y digitalizadas. Los expertos coinciden en que la seguridad de los algoritmos será a partir de ahora un tema central en la agenda de los ministerios de justicia de cada nación desarrollada.

La vulnerabilidad detectada pone de manifiesto que los modelos de lenguaje actuales pueden ser inducidos a error con relativa facilidad mediante técnicas adversarias ingeniosas y ocultas. Resulta fundamental que los desarrolladores de herramientas de tecnología legal implementen filtros de seguridad mucho más robustos frente a estos ataques de naturaleza invisible para el usuario humano.

La transparencia en el uso de la tecnología se vuelve una obligación ineludible para garantizar que el derecho a la defensa no se vea comprometido en ningún momento del proceso. Si las máquinas van a resumir las pretensiones de las partes, los jueces deben tener la certeza de que dichos resúmenes son fieles a la realidad fáctica presentada.

No se trata simplemente de un error informático o de una anécdota curiosa ocurrida en un tribunal geográficamente lejano a nuestra realidad cotidiana actual. Estamos ante una nueva forma de fraude procesal que utiliza la opacidad del código y los algoritmos para obtener ventajas indebidas frente al adversario legítimo del pleito judicial.

Muchos analistas sugieren que la implementación de sistemas de verificación automática de documentos será el siguiente paso lógico en la digitalización de las sedes judiciales nacionales.

Estos programas deberán ser capaces de detectar textos ocultos, metadatos sospechosos o cualquier alteración técnica que pretenda manipular el sentido original de la escritura presentada ante el juez.