Kimi-K3排序反馈蒸馏小检索器
热点事件持续更新
Kimi-K3排序反馈蒸馏小检索器
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
lateinteraction转推了dianetc提出的一种自改进检索流程：仅4亿参数的Ettin cross-encoder先为全部文档打分并保留前100名，再由Kimi-K3进行列表式排序，排序结果被转换为成对偏好，用于梯度更新检索器。 更新后的检索器权重会用于同一查询的再次检索，从而把当前推理模型的排序反馈沉淀到后续检索中。该流程的实际检索质量提升仍需以其效果证据为准。
AI 根据报道生成 · 2 小时前更新
最新进展11月7日 21:50
用推理模型蒸馏小检索器：Kimi-K3 排序反馈让检索权重持续增强报道时间线
沿着报道，了解事件的不同侧面。
11月7日
- AGI Hunt用推理模型蒸馏小检索器：Kimi-K3 排序反馈让检索权重持续增强
lateinteraction 转推 dianetc 的自改进检索流程，用仅 400M 参数的 Ettin cross-encoder 对全量文档打分并保留 top 100，再由推理模型 Kimi-K3 进行 listwise 排序。排序结果转化为 pairwise 偏好，通过梯度更新检索器并再次检索，持久化权重可让当前推理算力沉淀为后续检索质量提升。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。