跳到正文
AGI Hunt· cHHillee·· 2 小时前AI 评分27

Scale 评测负责人回应刷榜质疑:新任务持续更新,模型方将面临结构劣势

Scale 评测负责人回应刷榜质疑:新任务永续,刷榜者结构劣势

AI 导读

Scale 评测负责人 mertgulsun 回应模型评测“刷榜”质疑,称评测方可持续推出更新任务,针对评测优化的模型方将处于结构性劣势。相关表态涉及模型评测行业如何应对 benchmark 过拟合问题。

来源:AGI Hunt · agihunt.info