Beaker展示模型调优对基准结果的影响
热点事件持续更新
Beaker展示模型调优对基准结果的影响
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
Beaker 团队公布模型对比实验,称评测模型时若不同步调优 harness,会严重低估模型能力;在 AppWorld 编码 Agent 基准上,经自主调优后,GLM 5.3 Flash 的场景完成率从 29% 提升至 82%。 实验覆盖 8 个模型,并比较调优 harness 后的任务完成率、速度和成本;Beaker 已开放 preview。
AI 根据报道生成 · 1 小时前更新
最新进展11月5日 00:16
Beaker 展示模型对比前分别调优 harness 的必要性报道时间线
沿着报道,了解事件的不同侧面。
11月5日
- AGI HuntBeaker 展示模型对比前分别调优 harness 的必要性
Beaker 指出,不为模型同步调优 harness 会严重低估其能力,在 AppWorld 编码 Agent 基准上 GLM 5.3 Flash 的场景完成率由 29% 提升至 82%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。