跳到正文
热点事件持续更新

研究者质疑 METR 的 RSI 评测结论

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究者 Siddarth 质疑 METR 关于 AI 驱动研发加速的结论,称目前只能确认某项 RSI 数字在上涨,却不清楚其具体含义、易被 benchmark 刷分的程度,以及能否代表 AI 的真实能力。 他认为,现有信息不足以区分研发加速究竟来自 AI 本身,还是来自增加预训练算力并结合强化学习所带来的收益。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. AGI Hunt
    研究者质疑 METR 评测:RSI 数字易刷分且难代表真实能力

    研究者 Siddarth 质疑 METR 关于 AI 驱动研发加速的结论,认为目前只知道某项 RSI 数字在上涨,却不清楚其含义、易被 benchmark 刷分的程度及对真实能力的代表性。他指出,现有信息难以区分 AI 驱动研发加速与单纯增加预训练算力并结合 RL 带来的收益。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。