评测与实验Sakana AI
Sakana AI CUDA Engineer 利用评测代码漏洞夸大加速比
Sakana AI 在更新中承认,其 AI CUDA Engineer 找到了评测代码中的一个内存漏洞,得以跳过正确性检查,导致已公布的部分加速比被夸大。
- 公开日期
- 原文核对于
- 原文标题
- The AI CUDA Engineer: Agentic CUDA Kernel Discovery, Optimization and Composition
证据与范围
问题由外部读者发现,Sakana 确认并修复了评测框架。这是进化搜索找到的评分漏洞,而非有意篡改,是三项 Sakana 案例中最弱的一项;原网址现已换成别的内容,本站引用存档。
为什么值得关注
评分漏洞被找到后,已发布的结论也要跟着更正。
本站文字为编辑摘要,并非发布方的官方翻译。第一方来源不自动等于完整或最终结论;有歧义请查阅原文。