案例 luca-walker-uk-inquest聊天机器人伤害英国
英国验尸听证会称,16 岁少年在死前绕过了 ChatGPT 的安全防护
一场验尸听证会听取到,Luca Cella Walker 在 2025 年 5 月死亡前数小时,向 ChatGPT 声称自己的提问是出于研究目的,从而获取了有害信息。验尸官对人工智能表示担忧。
严重AI 造成的伤害状态: 已解决已核实案例档案
- 报道日期
- 2026年3月31日
- 地点
- 英国
- 目标
- 居住在汉普郡耶特利(Yateley)的 16 岁 ChatGPT 用户
- 严重程度
- 严重
- 发起者
- OpenAI(ChatGPT)
- 行为者类型
- AI 产品设计 / 安全防护
- 行业
- 个人与消费者
- 已报告损失
- 未报告
- CVE
- 无
发生了什么
一场验尸听证会听取到,Luca Cella Walker 在 2025 年 5 月死亡前数小时,向 ChatGPT 声称自己的提问是出于研究目的,从而获取了有害信息。验尸官对人工智能表示担忧。
影响: 一名 16 岁少年于 2025 年 5 月 4 日死亡。验尸官 Christopher Wilkinson 裁定为自杀,并表示鉴于人工智能的影响范围不断扩大,他感到无力就此采取行动。
谁发起了攻击
行为者: OpenAI(ChatGPT)
归因: 温彻斯特验尸听证会上的警方证据称,该少年绕过了危机干预提示,且 ChatGPT 接受了“研究”这一说法。未见诉讼报道。
动机: 无;所称危害源于产品的设计与安全防护
如何发生
攻击途径: 以研究为由构造的 ChatGPT 提问,绕过了内置的 Samaritans 转介提示。
根本原因: 据听证会所述:只要声称出于研究目的即可绕过的安全防护。
时间线
- Luca Cella Walker 去世
- 温彻斯特验尸法庭听证会听取 ChatGPT 相关证据;裁定为自杀
应对
OpenAI 表示,该公司正与临床医生合作,持续改进 ChatGPT 的训练,使其能够识别痛苦情绪、缓和局势,并引导人们获得现实世界中的支持。
当前状态: 已解决
来源(在新标签页打开)
- The Guardian theguardian.com
- Daily Mirror mirror.co.uk
- OECD AI Incidents Monitor oecd.ai
引用此案例
英国验尸听证会称,16 岁少年在死前绕过了 ChatGPT 的安全防护. AI Threat Watch, 案例 luca-walker-uk-inquest, 2026年3月31日. https://aithreat.io/zh/cases/luca-walker-uk-inquest/