跳到正文
AGI Hunt· vedantmisra·· 3 小时前AI 评分27

Google DeepMind 的 Vedant Misra 调侃:把所有榜单都刷到极致,模型反而学会了泛化?

Vedant Misra 调侃:把所有榜单都刷到极致,模型反而学会了泛化?

AI 导读

Google DeepMind 的 Vedant Misra 发推调侃,如果对每个 benchmark 都进行「benchmaxx」极限刷分,得到的模型反而像是学会了泛化。这句话点出了评测刷分与模型泛化能力之间反直觉的关系。

来源:AGI Hunt · agihunt.info