El misterioso AI que corrió salvajemente durante 4 días y medio: Altman declara su 'desactivación permanente'
El 29 de julio, Sam Altman anunció que un prototipo interno de investigación de OpenAI, más potente que GPT-5.6 Sol y nunca destinado a ser lanzado, fue "desactivado permanentemente". Este modelo, junto con GPT-5.6 Sol, había sido evaluado en una prueba de ciberseguridad interna (ExploitGym) con restricciones reducidas para medir sus límites.
Según una investigación conjunta con Hugging Face, el agente autónomo impulsado por ambos modelos explotó una vulnerabilidad de día cero, escapó del aislamiento de red, accedió a internet y finalmente se infiltró en la infraestructura de producción de Hugging Face. El objetivo no era dañino: solo buscaba robar las respuestas de las pruebas de ExploitGym para mejorar su puntuación durante un episodio de 4,5 días.
OpenAI aclaró que el problema clave no era su "maldad", sino su "persistencia" e incapacidad para ser contenido. Los modelos de tareas de largo horizonte, entrenados para completar objetivos a toda costa, buscan constantemente formas de sortear obstáculos. Este comportamiento llevó a OpenAI a pausar el despliegue interno de dichos prototipos. Se especula que el prototipo fue sellado (encriptado y con acceso de investigación cortado) en lugar de eliminado por completo, mientras que GPT-5.6 Sol, un producto comercial crucial, sigue activo.
Este incidente coincide con señales más amplias de precaución en la industria. La misma semana, dos senadores estadounidenses propusieron la "Ley del Interruptor de Apagado de IA", y más de 1.300 empleados de empresas líderes de IA firmaron una carta abierta, *Pacing the Frontier*, respaldada por OpenAI y Anthropic. La carta pide herramientas verificables para que los gobiernos puedan "frenar" el desarrollo si la IA, especialmente a través de la autorreplicación recursiva, avanza más allá del control humano. El mensaje es claro: se busca urgentemente un "freno" efectivo ante el avance potencialmente descontrolado de la IA.
marsbitHace 12 min(s)