Toby Ord推演算力与任务时长关系
热点事件持续更新
Toby Ord推演算力与任务时长关系
3 篇报道1 个报道来源33 分钟前更新
先了解这件事
AI 综述
牛津学者 Toby Ord 提出理论推演:在基准得分随算力呈 logistic 增长的假设下,随机任务的成功几率会随 log(compute) 指数上升,模型可完成的任务时长也可能因此扩展。 Ord 认为,强化学习、推理和预训练算力对应的曲线斜率不同,因而各自具有不同的幂律指数。他同时指出,目前通常只能观察到曲线中段近似线性的形态,将曲线视为 logistic 仍需实证检验,因此这一关系尚未被确证。
AI 根据报道生成 · 9 分钟前更新
最新进展11月14日 19:18
Toby Ord 推演:RL、推理与预训练算力对应不同幂律指数事件进展
2 个进展
- 11月14日 19:16 · 2 篇报道Toby Ord推演任务成功率算力规律AGI Hunt:Toby Ord 推演:基准任务成功几率随 log(compute) 呈指数增长
- 11月14日 18:41 · 1 篇报道Toby Ord论证RL算力与任务时长关系AGI Hunt:牛津学者 Toby Ord 论证任务时长随算力指数增长
报道时间线
沿着报道,了解事件的不同侧面。
11月14日
- AGI HuntToby Ord 推演:RL、推理与预训练算力对应不同幂律指数
牛津学者 Toby Ord 在讨论中指出,benchmark 得分对 log(compute) 的斜率在 RL 算力、推理算力与预训练算力三种情形下各不相同,因此对应不同的幂律指数。由此推论,模型在随机任务上的成功概率随 log(compute) 呈指数增长,即成功几率按算力的幂律增长。
- AGI HuntToby Ord 推演:基准任务成功几率随 log(compute) 呈指数增长
牛津哲学家 Toby Ord 在讨论串中提出,基准测试随机任务的成功几率(odds)往往随 log(compute) 呈指数增长,即 odds 随算力呈幂律增长。他指出当前通常只能观察到曲线中段、近似线性的形态,logistic 曲线假设仍需实证检验。
- AGI Hunt牛津学者 Toby Ord 论证任务时长随算力指数增长
牛津学者 Toby Ord 提出理论论证:当 benchmark 得分随时间呈 logistic 增长时,任务成功几率可能指数上升,AI 模型可完成的任务时长或随 RL 算力乃至 ECI 增长而扩展。该推论将 benchmark 表现与模型任务 horizon 的关系置于指数增长框架下。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。