LMEnt研究套件聚焦实体级知识定位

megamor2介绍并展示 LMEnt 研究套件，包含基于 Wikipedia 标注实体的预训练语料、实体级检索方法、12 个参数最高 1B 的可复现预训练模型，以及 4000 个中间 checkpoint，供研究机制可解释性、知识编辑、归因和幻觉。 据发布方介绍，实体级检索较现有工具最多提升 80.4%，相关模型在知识任务上的表现与主流开源模型相当；该套件强调可定位知识在预训练数据中的位置。

AI 根据报道生成 · 55 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。