AGI Hunt· _reachsumit·· 3 小时前AI 评分42
NHNM 方法:用正样本构造天然难负例,7K 数据训出媲美大模型的检索器
NHNM 方法:把正样本变自然难负例,7K 数据训出媲美大模型的检索器
AI 导读
arXiv 论文提出 NHNM 方法,将可转换负例提升为查询兼容样本,并以原始正例构造天然指令难负例。配套流水线在 MSMARCO 构建约 7K 实例的 NHNM-MARCO;微调 568M 到 4B 参数模型后,在 InstructIR、FollowIR 多个设置持平或超过更大检索器。
来源:AGI Hunt · agihunt.info