跳到正文
AGI Hunt· vincent_koc·· 5 小时前AI 评分42

OpenAI GDPval 基准遭质疑:公开种子任务质量翻车

GDPval 基准被批:随手抽到的种子任务质量就翻车

AI 导读

开发者首次查看 OpenAI GDPval 基准公开数据集时,随机抽到的首个种子任务便暴露质量问题。GDPval 宣称任务源自平均拥有 14 年从业经验的行业专业人士实际工作,公开分割部分还被 Artificial Analysis 用作关键评测集,相关质量因此受到质疑。

来源:AGI Hunt · agihunt.info