Depue辨析能力与算力增长关系
热点事件持续更新
Depue辨析能力与算力增长关系
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
OpenAI研究员Will Depue回应外界对扩展定律的误读,称原始论文使用双对数坐标,容易让人把能力与算力的关系理解为对数增长。实际上,模型损失确实随算力按双对数规律下降,但下游效用会随能力近似线性增长,而非同样呈对数关系。Depue认为,这一区别关系到持续增加算力是否仍有价值。
AI 根据报道生成 · 1 小时前更新
最新进展11月8日 18:14
OpenAI 研究员 will depue:下游效用随能力近似线性增长,并非对数报道时间线
沿着报道,了解事件的不同侧面。
11月8日
- AGI HuntOpenAI 研究员 will depue:下游效用随能力近似线性增长,并非对数
OpenAI 研究员 will depue 回应 scaling laws 误读,称原始论文采用 log-log 坐标,容易让人误以为能力与算力是对数关系;实际上 loss 确实按 log-log 下降,但下游效用随能力近似线性(log-linear)增长。这一区分直接影响“继续堆算力是否值得”的讨论。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。