跳到正文
热点事件持续更新

SatBench显示AI基准饱和速度加快

2 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Ethan Mollick制作并发布SatBench,追踪2023年以来AI实验室发布帖中引用的173个基准;按最佳成绩达到85%即算饱和的标准,其中109个已饱和,占63%。 结果显示,2023年版基准已全部饱和,2025年新基准的中位存活时间为14个月。SatBench据此反映,主流AI基准被模型快速刷至饱和,现有评测体系更新速度面临挑战。

AI 根据报道生成 · 21 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月15日
  1. AGI Hunt
    SatBench 统计大厂引用的 173 个 AI 基准已有 63% 饱和

    Ethan Mollick 制作 SatBench,统计自 2023 年以来各大 AI 实验室在发布帖中引用的基准及其饱和速度。截至 2026 年 11 月,173 个基准中已有 109 个饱和,占 63%;2023 年版基准已 100% 饱和,2025 年新基准的中位存活时间为 14 个月。

  2. AGI Hunt
    SatBench 统计显示 63% 的 AI 基准已被刷穿

    Ethan Mollick 发布的 SatBench 统计显示,2023 年以来 AI 实验室发布帖引用的 173 个基准中,约 63% 已达到饱和。SatBench 以最佳成绩达到 85% 为“刷穿”标准。结果显示,当前评测体系快速失效,行业亟需更难且持续更新的基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。