跳到正文
热点事件持续更新

Flex-RSI评测18个模型的自我改进能力

1 篇报道1 个报道来源34 分钟前更新

先了解这件事

AI 综述

Flex-RSI基准测试团队公布评测结果:18个前沿模型在固定权重下,通过改写代码、工具、提示词和工作流进行自我改进,覆盖24个任务、188次运行和近3800轮迭代。构建型任务更能拉开模型差距;分级反馈能推动开源权重模型进步,二元反馈则常使其停滞。在RoboCasa上,闭源模型的中位验证收益为51.2分,开源模型明显落后。

AI 根据报道生成 · 24 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月15日
  1. AGI Hunt
    Flex-RSI 基准评测 18 个前沿模型近 3800 轮自我改进

    Flex-RSI 基准测试了 18 个前沿模型在固定权重下改写代码、工具、prompt 和工作流的能力,覆盖 24 个任务、188 次运行及近 3800 轮自我改进。构建任务的收益更能拉开模型差距,分级反馈可推动开源权重模型进步,而二元反馈常使其停滞;RoboCasa 上闭源模型的中位验证收益为 51.2 分,开源模型明显落后。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。