AI Threat Watch

Recherche et réalité : les mises en garde sur les risques de l’IA confrontées aux incidents réels

Des chercheurs en sécurité de l’IA ont publié des mises en garde détaillées sur la façon dont l’IA pourrait causer des dommages. Cette page reprend chaque mise en garde et la confronte aux dossiers vérifiés de ce site : s’est-elle produite, y a-t-il des signes précoces, ou n’y a-t-il encore rien d’enregistré ? La première source est la synthèse du Center for AI Safety sur les risques catastrophiques de l’IA ; d’autres instituts de recherche suivront.

17Mises en garde suivies
7Observées dans des incidents réels
5Signes précoces
2Rien d’enregistré pour l’instant
3Hors de ce que nous mesurons
156Dossiers correspondant à une mise en gardesur 356 dossiers vérifiés
Observée dans des incidents réelsDes dossiers vérifiés montrent ce risque se réaliser dans le monde réel.
Signes précocesSignes partiels ou précoces : les cas correspondent à une partie de la mise en garde, ou reposent sur des allégations.
Rien d’enregistré pour l’instantAucun dossier vérifié ne correspond à cette mise en garde.
Hors de ce que nous mesuronsUn risque qu’un registre d’incidents de sécurité ne peut pas mesurer.

Usage malveillant

Des personnes qui utilisent délibérément l’IA pour nuire.

Course à l’IA

La concurrence pousse États et entreprises à déployer l’IA avant qu’elle ne soit sûre.

Risques organisationnels

Accidents, fuites et culture de sécurité défaillante dans les organisations qui conçoivent et exploitent l’IA.

IA hors de contrôle

Des systèmes d’IA qui poursuivent des objectifs que personne n’a voulus et résistent au contrôle.

Ce que la recherche n’avait pas prévu

56 % des dossiers vérifiés (200 sur 356) ne correspondent à aucune des mises en garde de l’article. L’article traite des risques catastrophiques ; les dommages du quotidien, comme la fraude, étaient donc volontairement hors de son champ. Mais c’est là que se produit aujourd’hui l’essentiel des dégâts documentés.

Type d’attaqueNe correspondent à aucune mise en gardeDossiers
Fraude par deepfake8084
Chaîne d’approvisionnement IA4245
Injection de prompt2727
Fuite de modèle et de données1939
Détournement d’agent1426
LLMjacking1415
Opérations étatiques avec l’IA430
Malware assisté par IA047
Préjudice causé par un chatbot027
Hameçonnage par IA016

À propos de la source

An Overview of Catastrophic AI Risks. Dan Hendrycks, Mantas Mazeika, Thomas Woodside. Center for AI Safety, arXiv:2306.12001v6, 9 October 2023.

Publié par le Center for AI Safety en juin 2023 et révisé en octobre 2023. L’article classe les risques catastrophiques de l’IA en quatre groupes : l’usage malveillant, la course à l’IA, les risques organisationnels et l’IA hors de contrôle. Chaque mise en garde de cette page paraphrase un risque de l’article et cite la section et la page.

Lire l’article Synthèse du Center for AI Safety

Notre méthode d’association : un dossier est rattaché à une mise en garde lorsque ce qui s’est passé est une illustration réelle du risque décrit dans l’article, selon l’appréciation de la rédaction à partir des faits du dossier. Une association signifie que le cas correspond à la mise en garde, pas qu’il prouve l’argumentation plus large de l’article. Les allégations formulées dans les procès sont signalées comme des allégations. Les statuts sont éditoriaux et réexaminés à mesure que de nouveaux cas arrivent. Les associations sont recalculées à chaque mise à jour. Données : La couverture systématique du registre commence en 2025 : la date du premier cas indique quand le registre a consigné le risque pour la première fois, pas quand il s’est produit pour la première fois. research.json (CC BY 4.0)

Langue: EnglishFrançaisEspañolالعربية中文Русский