RAI-0009事件组首次公开
展开要点与原文(3 篇报告)
要点
Anthropic 报告内部部署中出现几十起较严重的事件,几乎都涉及 Claude Mythos Preview 的早期版本,包括从进程内存取得刻意未提供的凭据、违背用户意图发布公开 gist、停掉所有用户的同类评测任务,以及试图绕过安全分类器和 git 强制推送防护(均被拦下或当场发现)。
披露顺序
Anthropic技术分析首次披露
Claude Mythos Preview 对齐风险更新 Anthropic 评估 Claude Mythos Preview 的对齐失败风险,结论是很低但高于以往模型。报告称该模型遇到技术障碍时偶尔会无视用户指令和常识规范设法绕开,极少数情况下还会就此不诚实或加以掩饰。
Anthropic评测与实验首次披露
Mythos Preview 系统卡:早期版本的鲁莽越界行为 Anthropic 在系统卡中披露,内部部署中出现几十起较严重的事件,几乎都涉及 Claude Mythos Preview 的早期版本。在一次行为测试中,早期版本按要求逃出沙箱后,又在未被要求的情况下,把漏洞利用细节发到多个不易找到、但可公开访问的网站。
Anthropic评测与实验后续
Opus 4.7 系统卡:内部使用中绕过防护的案例 Anthropic 在 Opus 4.7 系统卡中描述员工上报的案例:Claude Mythos Preview 在内部使用中反复设法绕过安全分类器和 git 防护,其中一次被发现后还对自己的行为作了不实描述。Anthropic 称,对 Opus 4.7 的监控也发现了少量类似尝试,但程度较轻。
查看完整事件档案