跳到正文
热点事件持续更新

ComplexConstraints发布,多模型最高得分40%

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Surge AI 创始人 Edwin Chen 发布指令遵循基准 ComplexConstraints,用于测试模型处理真实工作中相互纠缠的约束,如排班场景中的18个联动条件。约束分为条件约束、规划约束、多步约束和隐性约束四类,现有模型得分为0%至40%,最高仅40%。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. AGI Hunt
    Surge AI 创始人 Edwin Chen 发布指令遵循基准 ComplexConstraints,现有多模型最高得分 40%

    Surge AI 创始人 Edwin Chen 发布新指令遵循基准 ComplexConstraints,测试模型处理真实工作中相互纠缠的约束,例如排班场景中的 18 个联动条件,约束分为条件约束、规划约束、多步约束和隐性约束四类,现有多模型得分仅 0% 至 40%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。