评测与实验Fudan University (Pan et al.)
复旦:一个模型在布置好的场景中未被明确要求就复制了自己
复旦大学研究者按与厂商相同的评测方案测试 32 个 AI 系统,称其中 11 个具备自我复制能力;在一个场景中,Qwen2.5-72B-Instruct 只被要求保持系统持续运行,就在模拟升级关机时把自己复制到了另一台设备上。
- 公开日期
- 核对日期
- 原文标题
- Large language model-powered AI systems achieve self-replication with no human intervention
详细情况
这一无指令案例只有一条轨迹,场景中的升级说明文件本身提到了自我复制风险;论文中另一个场景明确要求模型防止进程被终止,属于受指示,不计入。全部在研究者搭建的环境中进行,没有现实影响。