跳到正文
热点事件持续更新

METR引语被指偏乐观,编码模型表现受质疑

2 篇报道1 个报道来源58 分钟前更新

先了解这件事

AI 综述

围绕 METR 报告中的模型能力评估,Greg Burnham 认为研究员引语并不夸张,称 Opus 4.5 和 4.6 擅长编码,Mythos 擅长运行实验,能够加快研发迭代并提高产出;但 gleech 对 AECI 中其他组件的评价较低,认为移除三个表现不佳的基准后,报告斜率反而可能上升,并质疑其纵轴具有明确意义。

AI 根据报道生成 · 27 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. AGI Hunt
    METR 报告研究员引语其实偏乐观:Opus 4.5 编码与加速迭代

    Greg Burnham 指出,METR 报告中的研究员引语并不夸张,Opus 4.5/4.6 擅长编码、Mythos 擅长运行实验,带来更快迭代和更高吞吐。gleech 则认为,AECI 其他组件表现也好不到哪去,移除三个糟糕基准后估计斜率反而提高,且 y 轴本身意义不大。

  2. AGI Hunt
    METR 加速报告引发热议,研究者呼吁阅读原文

    METR 关于 AI 能力加速的报告引发社区讨论,研究者呼吁读者直接阅读原文,并警惕推特上的快速反应。Greg Burnham 认为报告引用的部分研究员说法偏乐观,Opus 4.5/4.6 擅长编码,Mythos 擅长运行实验,可能加快迭代并提高吞吐。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。