METR引语被指偏乐观,编码模型表现受质疑
热点事件持续更新
METR引语被指偏乐观,编码模型表现受质疑
2 篇报道1 个报道来源58 分钟前更新
先了解这件事
AI 综述
围绕 METR 报告中的模型能力评估,Greg Burnham 认为研究员引语并不夸张,称 Opus 4.5 和 4.6 擅长编码,Mythos 擅长运行实验,能够加快研发迭代并提高产出;但 gleech 对 AECI 中其他组件的评价较低,认为移除三个表现不佳的基准后,报告斜率反而可能上升,并质疑其纵轴具有明确意义。
AI 根据报道生成 · 27 分钟前更新
最新进展11月6日 17:56
METR 报告研究员引语其实偏乐观:Opus 4.5 编码与加速迭代报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- AGI HuntMETR 报告研究员引语其实偏乐观:Opus 4.5 编码与加速迭代
Greg Burnham 指出,METR 报告中的研究员引语并不夸张,Opus 4.5/4.6 擅长编码、Mythos 擅长运行实验,带来更快迭代和更高吞吐。gleech 则认为,AECI 其他组件表现也好不到哪去,移除三个糟糕基准后估计斜率反而提高,且 y 轴本身意义不大。
- AGI HuntMETR 加速报告引发热议,研究者呼吁阅读原文
METR 关于 AI 能力加速的报告引发社区讨论,研究者呼吁读者直接阅读原文,并警惕推特上的快速反应。Greg Burnham 认为报告引用的部分研究员说法偏乐观,Opus 4.5/4.6 擅长编码,Mythos 擅长运行实验,可能加快迭代并提高吞吐。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。