跳到正文
热点事件持续更新

英伟达研究人员质疑超长上下文

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

英伟达研究团队认为,语言模型超长上下文窗口通常属于过度设计,不仅成本高昂,效果也未必更好。其研究称,在许多测试中,定期摘要和定向查找的表现与处理超长上下文相当。 报道以可处理约100万 tokens 的 GPT-5.6 Sol 与 8,192 tokens 的 GPT-4 作对比,指出前者容量约为后者的120倍,但这并不代表超长上下文能带来更好的任务效果。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月22日
  1. The Decoder
    Nvidia 研究人员:超大的 AI 上下文窗口是死路

    Nvidia 研究人员认为,超大的 AI 上下文窗口往往是过度设计,不仅成本高昂,效果也未必更优。GPT 5.6 Sol 可处理约 one million tokens,约为 GPT-4 8,192 tokens 的 120 倍,但许多测试显示定期摘要和定向查找效果相当。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。