跳到正文
MIT Technology Review AI· Grace Huckins·· 2 小时前AI 评分54

METR 更新 AI 时间跨度图,扩展开放式与判断型任务评测

The most misunderstood graph in AI just got a major update

AI 导读

METR 更新了被广泛传播但曾遭误读的 AI 时间跨度图,纳入更多需要长时间完成和开放式判断的任务。报告称,前沿模型可完成任务的长度仍呈指数增长,每四个月约翻倍,但模型在设计 AI 评测和评判哲学论证等任务上仍落后于人类。部分最新模型在评测设计任务上已达到“勉强超过门槛”,但相关任务数量少、评分困难,难以据此判断开放式能力的长期趋势。

来源:MIT Technology Review AI · technologyreview.com