跳到正文
热点事件持续更新

AGI之辩聚焦预训练与新知识学习

1 篇报道1 个报道来源23 分钟前更新

先了解这件事

AI 综述

Victor Taelin 在 AGI Hunt 发表长文,主张合理的 AGI 应能像人类一样高效学习新知识,而对话中权重不变的现有大语言模型尚不具备这一能力;他判断,除非出现无限上下文或 GPU 成本降低一万倍,当前路线难以扩展至这一目标。 akbirthko 则认为,预训练的优势在于模型能利用可海量获取、类似 PDF 的静态文本。两人由此形成分歧:预训练适合利用既有资料,却不等同于持续学习新知识。

AI 根据报道生成 · 12 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月12日
  1. AGI Hunt
    AGI 之辩:预训练为何赢在全球经济是 PDF,但 LLM 学不会新知识

    Victor Taelin 在 AGI Hunt 发表 AGI 长文,主张合理的 AGI 必须能像人类一样高效学习新知识,而对话中权重不变的 LLM 尚无法做到。他判断,除非无限上下文出现或 GPU 便宜 1 万倍,当前方法无法扩展至这一目标;akbirthko 则认为,预训练的优势来自可海量获取、类似 PDF 的静态文本。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。