跳到正文
热点事件持续更新

斯坦福研究员质疑模型排名未报不确定性

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

斯坦福 AI Lab 转发研究员 Anka Reuel 对 AI 模型评测排名的批评。Reuel 称,不同运行和 scaffold 会使评测分数大幅波动,而排行榜未呈现这种不确定性,属于营销而非科学呈现。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. AGI Hunt
    斯坦福研究员批评模型排名不报不确定性属于营销而非科学

    斯坦福 AI Lab 转发研究员 Anka Reuel 对模型评测排名的批评,指出 AI 评测分数会因不同 run 和 scaffold 大幅波动。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。