跳到正文
AGI Hunt· _reachsumit·· 3 小时前AI 评分47

阿里提出 QESChunker:用问答监督统一 RAG 重叠与非重叠分块

阿里提出 QESChunker:用问答监督统一 RAG 重叠与非重叠分块

AI 导读

阿里巴巴团队在论文中提出 QESChunker,利用人工标注或 LLM 生成的问句-证据对监督 RAG 分块,无需访问测试查询。非重叠分块可用动态规划精确求解,重叠分块采用达到 (1-1/√e) 近似比的贪心算法;在 2 个自建数据集和 3 个公开数据集上,两种变体的完整证据召回率几乎全面超过现有分块方法。

来源:AGI Hunt · agihunt.info