上海AI Lab提出并开源能量引导模型
热点事件持续更新
上海AI Lab提出并开源能量引导模型
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
上海人工智能实验室提出能量引导模型(ESM),并以OpenESM名义在GitHub和Hugging Face开放代码与模型。团队将能量导向的隐空间优化与token生成整合进单一架构,使更有利的token对应更低能量值。 团队称,ESM在三个大规模语料上完成预训练,并通过26个基准评估其扩展行为,报告模型可随规模扩展并改进基础语言建模;这一效果目前来自团队自身的实验结论。
AI 根据报道生成 · 2 小时前更新
最新进展10月28日 09:17
上海AI Lab提出OpenESM:能量引导模型作为可扩展基座学习器报道时间线
沿着报道,了解事件的不同侧面。
10月28日
- AGI Hunt上海AI Lab提出OpenESM:能量引导模型作为可扩展基座学习器
上海人工智能实验室提出OpenESM,将能量导向的隐空间优化与token生成整合进单一架构,使有利token对应更低能量值。团队在三个大规模语料上预训练ESM,并在26个基准上评估其scaling行为,报告其可有效扩展并改进基础语言建模;代码与模型已在GitHub和Hugging Face开源。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。