跳到正文
AGI Hunt· gleech·· 1 小时前AI 评分28

gleech 批评 METR AECI:三个低质量基准无法解释能力加速,其余组件亦受质疑

gleech:三个烂基准解释不掉加速,但 AECI 其余组件堪忧

AI 导读

gleech 重申对 METR AECI 基准组合的批评,认为移除三个质量低下的基准反而会提高能力加速的估计斜率。他据此推断 AECI 其他组件同样表现有限,并质疑整条曲线的 y 轴缺乏实际意义。

来源:AGI Hunt · agihunt.info