跳到正文
热点事件持续更新

LlamaIndex发布Boo Bench并公布解析器测评

2 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

LlamaIndex发布由179页真实文档组成的Boo Bench,用于测试文档解析器是否陷入重复幻觉;公司称,LlamaParse Agentic与Agentic Plus在全部陷阱页中均实现零Boo,表现优于最强前沿VLM约99.4%和开源VLM 61%—93%的成绩。 Boo页面包括点导线、全为0.00的表格、近似重复行和罕见文字扫描件;解析器复读页面外内容、返回空结果或运行满10分钟,均记为一次Boo。该结论来自LlamaIndex公布的自家测评。

AI 根据报道生成 · 2 小时前更新

事件进展

2 个进展

  1. 10月30日 00:36 · 1 篇报道
    LlamaParse实测文档解析结果
    AGI Hunt:LlamaParse Agentic 文档解析实测 179/179 满分,领先前沿 VLM
  2. 10月30日 00:36 · 1 篇报道
    发布文档解析器重复幻觉基准
    AGI Hunt:LlamaIndex 发布 Boo Bench 基准,测试文档解析器重复幻觉

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. AGI Hunt
    LlamaParse Agentic 文档解析实测 179/179 满分,领先前沿 VLM

    LlamaIndex 实测显示,LlamaParse Agentic 与 Agentic Plus 在 179 个陷阱页中均取得零 Boo,最强前沿 VLM 约为 99.4%,开源 VLM 为 61%–93%。测试页面包含点导线、全为 0.00 的表格、近似行和罕见文字扫描件,解析器复读页面外内容、返回空结果或运行满 10 分钟均记为一次 Boo。

  2. AGI Hunt
    LlamaIndex 发布 Boo Bench 基准,测试文档解析器重复幻觉

    LlamaIndex 发布 Boo Bench 基准,由 179 页真实文档组成,用于诱导文档解析器进入重复循环。测试覆盖前导点、全为 0.00 的表格、近似重复行和罕见文字扫描件等页面,其中有模型面对一页 246 个脱敏 x 时输出超过 23,000 个。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。