跳到正文
热点事件持续更新

Depue辨析能力与算力增长关系

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

OpenAI研究员Will Depue回应外界对扩展定律的误读,称原始论文使用双对数坐标,容易让人把能力与算力的关系理解为对数增长。实际上,模型损失确实随算力按双对数规律下降,但下游效用会随能力近似线性增长,而非同样呈对数关系。Depue认为,这一区别关系到持续增加算力是否仍有价值。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月8日
  1. AGI Hunt
    OpenAI 研究员 will depue:下游效用随能力近似线性增长,并非对数

    OpenAI 研究员 will depue 回应 scaling laws 误读,称原始论文采用 log-log 坐标,容易让人误以为能力与算力是对数关系;实际上 loss 确实按 log-log 下降,但下游效用随能力近似线性(log-linear)增长。这一区分直接影响“继续堆算力是否值得”的讨论。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。