跳到正文
AGI Hunt· rbhar90·· 1 小时前AI 评分30

METR 研究员:前沿实验室评测回避科学难题,如路灯下找钥匙

AI 导读

METR 研究员 rbhar90 反驳 Dwarkesh 的嘲讽,称许多前沿实验室仅在有限问题集上测试系统,回避容易暴露前沿模型缺陷的科学难题。他认为前沿科学基准不够严肃,LLM-as-judge 效果不佳,批评这种回避如同“路灯下找钥匙”,但认可 Dwarkesh 值得以善意态度展开讨论。

来源:AGI Hunt · agihunt.info