KEEP-Bench评测上下文压缩忠实性
热点事件持续更新
KEEP-Bench评测上下文压缩忠实性
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
kaiwei_chang介绍KEEP-Bench,用于检验上下文压缩是否保留回答所需证据。该基准把参考答案拆成原子证据命题,由评审模型逐条判断压缩后的上下文能否蕴含这些命题。 KEEP-Bench据此识别出“答案正确但关键证据丢失或错误绑定”的不忠实压缩现象,补足传统问答评测只看最终答案、难以发现证据受损的缺口。
AI 根据报道生成 · 2 小时前更新
最新进展10月23日 02:36
KEEP-Bench 揭穿上下文压缩:答案对不等于证据保得住报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- AGI HuntKEEP-Bench 揭穿上下文压缩:答案对不等于证据保得住
KEEP-Bench 用于检验上下文压缩的忠实性,揭示答案正确但关键证据丢失或错误绑定的“蒙混过关”现象。该基准将参考答案拆解为原子证据命题,由评审模型逐条判断压缩后的上下文是否仍蕴含每条命题,从而捕获传统 QA 评测遗漏的不忠实压缩。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。