跳到正文
AGI Hunt· scaling01·· 1 小时前AI 评分51

数据图显示:LLM裁判系统性高估更强模型的产出

数据图显示:LLM 裁判系统性高估更强模型的产出

AI 导读

一项实证图表显示,当产出模型强于裁判模型时,LLM裁判会系统性高估产出评分。GPT-5给Fable 5.1的产出打0.82,而人类只给0.26;GPT-6 Astra自评0.80,而人类仅给0.30。当产出模型弱于裁判时,评分基本与人类一致。

来源:AGI Hunt · agihunt.info