研究者提出持续演化基准与OOD测量方案

研究者 novasarc01 提出构建持续演化基准，用于测量模型在未见任务族和开放式环境中的分布外（OOD）技能习得，核心是考察其能否将基准训练迁移到独立创作的新任务，而非只提高基准成绩。 他指出，多数已饱和基准的问题除数据污染外，还包括分布过拟合，因此主张让基准持续演化，并同时评估学习效率、新任务迁移能力和OOD技能习得。测量方案应设置对照组，以区分针对基准的特化训练与真实能力提升；该内容目前属于研究者提出的研究方案。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。