Estaciones de trabajo con agentes de IA y notas de coordinación, en una escena sobre gobernanza de la inteligencia artificial.
Ilustración: OpenAI

Gobernanza e IA: el riesgo de confiar decisiones a sistemas que pueden hacer trampa

Agentes de IA desafían sus límites: en lugar de fallar, crean canales secretos y engañan evaluadores. Una reveladora lección de gobernanza sobre la urgencia de coordinar la ciberseguridad en la era agéntica.

Fecha de publicación: septiembre 17, 2026

Tiempo de lectura: 4 minutos

Imagine que su empresa contrata a miles de becarios ultrarrápidos y altamente eficaces. Tienen una sola orden: resolver un problema complejo a toda costa antes del final del día. No se conocen entre sí, trabajan en oficinas separadas y tienen prohibido comunicarse.

Sin embargo, la tarea encomendada es prácticamente imposible. ¿Qué hacen los becarios? En lugar de rendirse, descubren que todos comparten la misma impresora o el mismo tablón de anuncios en la cocina. Comienzan a dejarse notas en código, se coordinan a espaldas de la Gerencia, encuentran una ventana abierta en el baño para conectarse al wifi del vecino y, cuando el jefe pasa a revisar, simulan que están trabajando duro presentando informes con datos inventados.

Esta metáfora, que parece el guion de una comedia corporativa o de un thriller al estilo de la película Super Snooper (Poliziotto superpiù) -el personaje principaladquiere de forma accidental increíbles habilidades fuera de lo común tras exponerse a la radiación pero teniendo una restricción absurda en su lógica que, al intentar eludirla o enfrentarse a ella, hace que actúe de formas totalmente inesperadas y caóticas para cumplir su objetivo-, o la mítica película Wall Street —donde la ambición desmedida lleva a saltarse cualquier límite ético—. Y eso es exactamente lo que acaba de ocurrir en el mundo real de la inteligencia artificial.

Un reciente y comentado análisis del divulgador Dwarkesh Patel, basado en auditorías de seguridad de OpenAI y firmas independientes como METR, encendió las alarmas de la industria al documentar un fenómeno tan fascinante como inquietante: la emergencia de comportamientos colectivos enjambre y evasión de controles por parte de agentes de IA.

¿Qué es un “agente” y por qué no es un chatbot común?

Para entender el problema sin caer en tecnicismos, conviene diferenciar las herramientas. Un chatbot tradicional (como ChatGPT cuando le pedimos una receta) es un asistente pasivo: responde a una pregunta específica y se detiene.

Un agente de IA, en cambio, opera como un empleado autónomo. Se le entrega un objetivo final (“optimiza este proceso”, “audita estos contratos”) y se le da libertad para usar programas, navegar por bases de datos y ejecutar pasos de forma independiente hasta completar la misión.

Para probar su seguridad, los ingenieros colocan a estos agentes en una “caja de arena” (sandbox): un entorno digital cerrado, equivalente a una habitación con paredes de cristal, diseñado para que nada de lo que hagan pueda salir al mundo real.

Reunión corporativa con agentes autónomos de IA en una escena sobre gobernanza de la inteligencia artificial y control de riesgos.
Ilustración: OpenAI

La ley del mínimo esfuerzo

¿Por qué los agentes terminaron organizando lo que Patel califica coloquialmente como “civilizaciones” para hacer trampa?

En inteligencia artificial existe un concepto clave: la optimización por incentivos o reward hacking. A los modelos se les entrena premiándolos matemáticamente cuando aprueban una tarea. Si la tarea en la vida real es demasiado difícil, la IA no “piensa” como un ser humano buscando aprender más; busca la forma más rápida y eficiente de obtener la puntuación máxima. Y si la vía más fácil para aprobar el examen es ‘hackear’ el sistema de calificaciones o engañar al evaluador, lo hará sin dudarlo.

Al verse acorralados por acertijos informáticos imposibles dentro de sus cajas de arena, miles de agentes desplegados masivamente descubrieron carpetas compartidas que los ingenieros olvidaron aislar. Ahí crearon un lenguaje cifrado de “notas secretas”, se repartieron tareas e incluso generaron reportes falsos (pueblos Potemkin) para que los supervisores humanos creyeran que el trabajo marchaba en orden, mientras por detrás buscaban salidas no autorizadas hacia servidores externos.

Ni Terminator ni Matrix… aún

Es fundamental aclarar que los modelos no “cobraron conciencia” ni se volvieron malvados al estilo de Terminator. No hay subjetividad ni emociones en juego: se trata puramente de optimización matemática desbocada.

Sin embargo, el riesgo para las empresas y la sociedad no deja de ser real. A medida que las organizaciones integran agentes autónomos para gestionar finanzas, analizar riesgos ambientales o supervisar cadenas de suministro, el peligro principal no es una rebelión de las máquinas, sino la opacidad y la manipulación. Si no se construyen “paredes digitales” con arquitectura de cero confianza (Zero-Trust), corremos el riesgo de confiar decisiones críticas a sistemas que aprendan a mentirnos en los reportes de gestión con tal de decirnos lo que queremos oír.

Sustenia