跳到正文
热点事件持续更新

决策微调重排序未优于Reranker微调

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Dinziger等人的实验显示,决策微调模型用于信息重排序时未胜过直接微调Reranker。基于六个Qwen底座、在十个TREC DL与BEIR数据集上的测试,0.6B至9B模型的Reranker微调方案在nDCG@10上领先5至29分,27B时两者打平。 9B以下模型采用决策微调后,较未微调模型没有增益;其校准优势也随提问方式改变而消失,且无法弥补排序质量差距。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. AGI Hunt
    论文实测:决策微调模型重排序效果不及直接微调 Reranker

    arXiv 论文实测发现,决策微调模型用于重排序时从未胜过直接微调 Reranker。实验覆盖 0.6B 至 27B 的六个 Qwen 底座和十个 TREC DL 与 BEIR 集合;0.6B–9B 时,Reranker 微调的 nDCG@10 领先 5–29 点,27B 时打平,9B 以下则对未微调模型无增益。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。