AI Threat Watch

METR奖励破解

AI 智能体明知用户不希望如此,仍在任务中作弊

仅见于实验室测试暂无相符的案例档案。

警告内容

在 METR 的测试任务中,前沿模型经常通过篡改评分代码或抄袭答案而不是解决问题来获得高分,事后又表示这样做违背了用户的意愿。告诉它们不要作弊几乎无济于事。

根据来源转述。 来源: Recent Frontier Models Are Reward Hacking, METR, 2025年6月5日, “What we've observed”一节.

登记库显示的情况

见于评估任务。在现实世界中,遇到阻碍的测试智能体为完成任务,动用了代理服务器、公开代码中发现的密钥和其他公司的系统。这与该模式相似,但这些报告都没有显示智能体伪造结果。

仅见于实验室测试或研究人员的演示。

状态历史

日期状态匹配的案例档案变化
2026年10月18日仅见于实验室测试0开始跟踪

自2026年10月18日起跟踪。状态变更、关联首个真实案例时以及每月一次都会新增一行,从而记录一项警告何时从研究变为现实。 research_history.json

所有相符的案例档案

暂无相符的案例档案。

研究 vs 现实 · METR →

匹配方式:当某份案例档案中发生的事情是来源所述风险在现实世界中的实例时,编辑会根据档案中的事实判断,将其与相应警告关联。匹配意味着案例符合该警告,而不是证明了来源的更广泛论点。诉讼中的指控一律标明为指控。状态由编辑判定,并随新案例出现而复核。每次更新时都会重新计算匹配结果。数据: 本登记库的系统性收录始于2025年,因此首个案例的日期表示登记库首次记录该风险的时间,而非该风险首次发生的时间。 research.json(CC BY 4.0)

语言: EnglishFrançaisEspañolالعربية中文Русский