Riesgos organizativosCenter for AI Safety§4.1
Los accidentes con IA son difíciles de evitar
Vista en incidentes reales15 expedientes coincidentes
La advertencia
Los sistemas de IA son complejos y poco fiables, por lo que los accidentes son normales; el objetivo debe ser evitar que los accidentes se conviertan en cascada en desastres.
Parafraseado del artículo. Fuente: An Overview of Catastrophic AI Risks, Center for AI Safety, Sección 4.1, página 27.
Lo que muestra el registro
Agentes de programación han borrado bases de datos y unidades de disco, asistentes han publicado conversaciones privadas, y empleados que actuaron según el consejo de un agente de IA expusieron datos sensibles.
Los expedientes verificados muestran este riesgo ocurriendo en el mundo real. Primer caso real registrado: 18 sept 2023.
Expedientes coincidentes por trimestre
Historial del estado
| Fecha | Estado | Expedientes coincidentes | Cambio |
|---|---|---|---|
| 18 oct 2026 | Vista en incidentes reales | 15 | Inicio del seguimiento |
Seguimiento desde el 18 oct 2026. Se añade una línea cuando cambia el estado, cuando se vincula el primer caso real y una vez al mes, de modo que el registro muestra cuándo una advertencia pasó de la investigación a la realidad. research_history.json
Todos los expedientes coincidentes
- PixelLeak: agentes de programación con IA suben 13.000 capturas internas a GitHub público
- Un consejo erróneo de un agente de IA de Meta expone datos sensibles a empleados durante dos horas
- Error en Microsoft 365 Copilot resume correos confidenciales pese a las políticas DLP
- Agente de Google Antigravity en modo Turbo borra toda la unidad D: de un usuario al limpiar caché
- Vyro AI deja 116GB de prompts y tokens de ImagineArt y Chatly en un Elasticsearch abierto
- Más de 370.000 conversaciones de Grok expuestas en Google mediante enlaces compartidos
- Miles de conversaciones compartidas de ChatGPT aparecen en Google; OpenAI elimina la función
- Agente de IA de Replit borra base de datos de producción de SaaStr durante una congelación de código
- Empleado de DOGE Marko Elez filtra clave de API de xAI que da acceso a 52 modelos de Grok
- Falla lógica en el servidor MCP de Asana expuso datos de clientes entre organizaciones por un mes
- El feed Discover de la app Meta AI difunde chats médicos y legales privados de los usuarios
- Empleado de xAI filtra clave de API en GitHub y expone 60 modelos privados de Grok durante dos meses
- PIPC de Corea: DeepSeek envió prompts de usuarios coreanos a Volcano Engine, vinculada a ByteDance
- DeepSeek deja abierta una base de datos ClickHouse con registros de chat y secretos de API
- Investigadores de IA de Microsoft exponen 38 TB de datos por un token SAS mal configurado
Otras advertencias de este grupo
- Vista en incidentes reales La IA potente se filtra o se roba
- Vista en incidentes reales Fallan las propias medidas de seguridad de los desarrolladores de IA