跳到正文
AGI Hunt· ArtificialAnlys·· 3 小时前AI 评分48

Artificial Analysis 编码代理指数 v2.0 几乎全员掉分:21 个配置中 20 个下滑

编码代理指数 v2.0 几乎全员掉分:21 个配置中 20 个下滑

AI 导读

Artificial Analysis 补充说明,编码代理指数 v2.0 的分数普遍低于 v1.5:两个版本都测试的 21 个配置中,平均分从 54.8 降至 47.4,20 个配置下滑。主要原因是 FrontierCode v1.1 替换 DeepSWE,且更严格的 SWE-Atlas-QnA-AA 评分也贡献了降幅;Terminal-Bench 4.0 未变,两版分数不可直接对比。

来源:AGI Hunt · agihunt.info