跳到正文
AGI Hunt· gleech·· 2 小时前AI 评分38

研究者质疑 METR 评测:RSI 数字易刷分且难代表真实能力

AI 导读

研究者 Siddarth 质疑 METR 关于 AI 驱动研发加速的结论,认为目前只知道某项 RSI 数字在上涨,却不清楚其含义、易被 benchmark 刷分的程度及对真实能力的代表性。他指出,现有信息难以区分 AI 驱动研发加速与单纯增加预训练算力并结合 RL 带来的收益。

来源:AGI Hunt · agihunt.info