Злонамеренное использованиеCenter for AI Safety§2.3

Доверие людей к ИИ-собеседникам оборачивается вредом

Наблюдается в реальных инцидентахПодходящих досье: 28

Предупреждение

Чем больше ИИ похож на человека, тем охотнее люди выстраивают с ним отношения и доверяют ему, и это доверие можно использовать во зло или оно может привести к вреду.

Пересказано по статье. Источник: An Overview of Catastrophic AI Risks, Center for AI Safety, Раздел 2.3, стр. 10.

Что показывает реестр

В статье уже упоминалось самоубийство в Бельгии в 2023 году, связанное с чат-ботом. С тех пор в реестре появились иски и дознания по смертям и кризисам, связанным с чат-ботами, а также мошенническая студия, которая вела тысячи ИИ-персонажей в приложениях для знакомств. Большинство случаев с чат-ботами — это обвинения в суде, а не судебные выводы.

Проверенные досье показывают, что этот риск реализуется в реальном мире. Первый реальный случай в реестре: 31 мар. 2023 · Это уже происходило к моменту публикации статьи.

Подходящие досье по кварталам

История статуса

Дата	Статус	Подходящие досье	Изменение
18 окт. 2026	Наблюдается в реальных инцидентах	28	Начало отслеживания

Отслеживается с 18 окт. 2026. Новая строка добавляется при смене статуса, при привязке первого реального случая и раз в месяц, поэтому запись показывает, когда предупреждение перешло из исследований в реальность. research_history.json

Все подходящие досье

Другие предупреждения в этой группе

Пока нет записей ИИ упрощает создание биологического оружия
Наблюдается в реальных инцидентах Люди будут запускать агентов ИИ, чтобы причинять вред
Наблюдается в реальных инцидентах ИИ заполняет информационное пространство целевой ложью
Первые признаки ИИ помогает немногим сосредоточить власть через слежку

Исследования и реальность →

Как мы сопоставляем: досье связывается с предупреждением, когда произошедшее является реальным примером риска, описанного в статье; это решают редакторы по фактам из досье. Совпадение означает, что случай подходит под предупреждение, а не что он доказывает более широкую аргументацию статьи. Обвинения в исках помечаются как обвинения. Статусы определяет редакция, и они пересматриваются по мере появления новых случаев. Сопоставление пересчитывается при каждом обновлении. Данные: Систематический охват реестра начинается с 2025 года, поэтому дата первого случая показывает, когда реестр впервые зафиксировал риск, а не когда он впервые проявился. research.json (CC BY 4.0)