跳到正文
热点事件持续更新

检索重排研究报告与代码开源

4 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Weaviate 团队成员 Christopher Shorten 发布《Scaling Reranked Retrieval》并开源配套代码,研究搜索空间扩大时如何在检索与重排阶段分配算力。报告称,混合检索候选池由 k=100 扩至 2000 后,召回率从 0.476 升至 0.871,再经大语言模型二次重排,nDCG 提升至原来的 2.6 倍;对 20 篇文档进行一次成本约 0.0022 美元的 LLM 精排,收益超过继续加深检索,组合三个重排器则几乎没有额外提升。 交叉编码器输出截断从 20 扩至 50 和 100 后,zerank-2 召回率由 0.560 升至 0.673 和 0.738。报告据此指出,许多金标文档位于初始前 20 名之外,检索加深和重排收益存在边界。

AI 根据报道生成 · 1 小时前更新

事件进展

2 个进展

  1. 11月16日 23:14 · 3 篇报道
    发布检索重排研究报告
    AGI Hunt:Weaviate 开源重排序检索扩展研究与代码
  2. 11月16日 23:14 · 1 篇报道
    扩展重排截断数提升召回率
    AGI Hunt:zerank-2 重排输出从 20 扩至 100,召回率升至 0.738

报道时间线

沿着报道,了解事件的不同侧面。

11月17日
  1. AGI Hunt
    Weaviate 开源重排序检索扩展研究与代码

    Weaviate 团队成员发布研究报告《Scaling Reranked Retrieval》,探讨搜索空间持续增大时,搜索与重排序两个阶段应如何最优分配算力。配套代码同步开源,并以长推文线程呈现报告内容,为大规模检索系统的资源配置提供参考。

  2. AGI Hunt
    重排序检索研究报告:检索加深 20 倍召回近翻倍,排序质量趋于饱和

    CShorten30 发布《Scaling Reranked Retrieval》研究报告,指出检索深度加深 20 倍可令召回率接近翻倍,但排序质量趋于饱和。对 20 篇文档进行一次成本约 $0.0022 的 LLM 精排,提升超过继续加深检索,组合 3 个 reranker 也几乎不再带来额外收益。

11月16日
  1. AGI Hunt
    Christopher Shorten 检索重排研究:混合检索加 LLM 二次重排使 nDCG 提升 2.6 倍

    Christopher Shorten 发布研究报告 Scaling Reranked Retrieval,分析检索算力在深度、候选池规模等三个杠杆上的配置,并将混合检索候选池从 k=100 扩至 2000,召回率由 0.476 升至 0.871。

  2. AGI Hunt
    zerank-2 重排输出从 20 扩至 100,召回率升至 0.738

    CShorten30 将 cross encoder 阶段的重排输出截断从 20 扩展至 50 和 100,发现许多金标文档位于初始 cutoff=20 之下。zerank-2 的召回率从 20 名时的 0.560,提升至 50 名时的 0.673 和 100 名时的 0.738。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。