跳到正文
热点事件持续更新

Cognition推出FrontierCode 2.0编码基准

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Cognition联合DevinAI成员及研究团队推出编码基准FrontierCode 2.0,以“这个PR你真的会合并吗”为核心,检验AI能否判断代码是否值得合并。 该基准保留欠明确、模糊的需求提示,并将任务扩展至更多样、更大范围的应用场景,同时提高可合并性标准,重点考察模型在信息不完整时能否自主作出工程判断。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月28日
  1. AGI Hunt
    Cognition 发布 FrontierCode 2.0:用模糊需求考验 AI 的工程判断力

    Cognition 与 DevinAI 成员及研究团队合作推出编码基准 FrontierCode 2.0。该基准以“这个 PR 你真的会合并吗”为核心,通过保留模糊需求的欠明确提示,考察模型在任务多样、范围更大及可合并性标准更高的情况下,能否自主判断代码是否值得合并。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。