AGI Hunt· _reachsumit·· 3 小时前AI 评分47
阿里提出 QESChunker:用问答监督统一 RAG 重叠与非重叠分块
阿里提出 QESChunker:用问答监督统一 RAG 重叠与非重叠分块
AI 导读
阿里巴巴团队在论文中提出 QESChunker,利用人工标注或 LLM 生成的问句-证据对监督 RAG 分块,无需访问测试查询。非重叠分块可用动态规划精确求解,重叠分块采用达到 (1-1/√e) 近似比的贪心算法;在 2 个自建数据集和 3 个公开数据集上,两种变体的完整证据召回率几乎全面超过现有分块方法。
来源:AGI Hunt · agihunt.info