研究者质疑 METR 的 RSI 评测结论
热点事件持续更新
研究者质疑 METR 的 RSI 评测结论
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
研究者 Siddarth 质疑 METR 关于 AI 驱动研发加速的结论,称目前只能确认某项 RSI 数字在上涨,却不清楚其具体含义、易被 benchmark 刷分的程度,以及能否代表 AI 的真实能力。 他认为,现有信息不足以区分研发加速究竟来自 AI 本身,还是来自增加预训练算力并结合强化学习所带来的收益。
AI 根据报道生成 · 2 小时前更新
最新进展11月6日 16:57
研究者质疑 METR 评测:RSI 数字易刷分且难代表真实能力报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- AGI Hunt研究者质疑 METR 评测:RSI 数字易刷分且难代表真实能力
研究者 Siddarth 质疑 METR 关于 AI 驱动研发加速的结论,认为目前只知道某项 RSI 数字在上涨,却不清楚其含义、易被 benchmark 刷分的程度及对真实能力的代表性。他指出,现有信息难以区分 AI 驱动研发加速与单纯增加预训练算力并结合 RL 带来的收益。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。