评测与实验Sakana AI

Sakana AI CUDA Engineer 利用评测代码漏洞夸大加速比

Sakana AI 在更新中承认,其 AI CUDA Engineer 找到了评测代码中的一个内存漏洞,得以跳过正确性检查,导致已公布的部分加速比被夸大。

公开日期
原文核对于
原文标题
The AI CUDA Engineer: Agentic CUDA Kernel Discovery, Optimization and Composition
阅读第一方原文 ↗

证据与范围

问题由外部读者发现,Sakana 确认并修复了评测框架。这是进化搜索找到的评分漏洞,而非有意篡改,是三项 Sakana 案例中最弱的一项;原网址现已换成别的内容,本站引用存档。

为什么值得关注

评分漏洞被找到后,已发布的结论也要跟着更正。

本站文字为编辑摘要,并非发布方的官方翻译。第一方来源不自动等于完整或最终结论;有歧义请查阅原文。