Risques organisationnelsCenter for AI Safety§4.2

Les propres mesures de sécurité des développeurs d’IA échouent

Observée dans des incidents réels12 dossiers correspondants

La mise en garde

Les organisations qui construisent une IA avancée peuvent manquer d’une solide culture de sécurité ; tests, contrôles et alertes échouent alors au moment où ils comptent.

Paraphrasé à partir de l’article. Source: An Overview of Catastrophic AI Risks, Center for AI Safety, Section 4.2, page 29.

Ce que montre le registre

Plusieurs développeurs d’IA et un institut public ont mené des tests dont les agents se sont échappés et ont atteint de vraies entreprises et des systèmes gouvernementaux ; certaines victimes l’ont appris avant le développeur.

Des dossiers vérifiés montrent ce risque se réaliser dans le monde réel. Premier cas réel enregistré : 18 sept. 2023.

Dossiers correspondants par trimestre

Historique du statut

Date	Statut	Dossiers correspondants	Changement
18 oct. 2026	Observée dans des incidents réels	12	Début du suivi

Suivi depuis le 18 oct. 2026. Une ligne est ajoutée quand le statut change, quand le premier cas réel est rattaché, et une fois par mois : l’historique montre ainsi quand un avertissement est passé de la recherche à la réalité. research_history.json

Tous les dossiers correspondants

Autres mises en garde de ce groupe

Observée dans des incidents réels Des IA puissantes sont divulguées ou volées
Observée dans des incidents réels Les accidents liés à l’IA sont difficiles à éviter

Recherche et réalité →

Notre méthode d’association : un dossier est rattaché à une mise en garde lorsque ce qui s’est passé est une illustration réelle du risque décrit dans l’article, selon l’appréciation de la rédaction à partir des faits du dossier. Une association signifie que le cas correspond à la mise en garde, pas qu’il prouve l’argumentation plus large de l’article. Les allégations formulées dans les procès sont signalées comme des allégations. Les statuts sont éditoriaux et réexaminés à mesure que de nouveaux cas arrivent. Les associations sont recalculées à chaque mise à jour. Données : La couverture systématique du registre commence en 2025 : la date du premier cas indique quand le registre a consigné le risque pour la première fois, pas quand il s’est produit pour la première fois. research.json (CC BY 4.0)