跳到正文
热点事件持续更新

OpenDS-World发布,前沿模型最高准确率39%

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

港科大(广州)、复旦大学、华盛顿大学、帝国理工等机构联合发布 OpenDS-World 深度研究基准;在统一的实时网页工具环境中,12个受测前沿模型最高准确率仅为39%。 该基准收录200个基于真实网页的任务,每项从一段视频线索开始,要求模型主动搜索、访问并串联网页证据,且不预设工具调用顺序。任务证据链经独立验证并对应唯一事实答案;所有模型的搜索预算均为3600秒或100次工具调用。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月15日
  1. AGI Hunt
    OpenDS-World 基准评测 12 个前沿模型,最优准确率仅 39%

    港科大(广州)、复旦大学、华盛顿大学、帝国理工等机构联合发布 OpenDS-World 基准,包含 200 个基于真实网页的深度研究任务。12 个前沿模型中表现最好的仅答对 39%,任务要求模型从视频线索出发,在实时网站中搜索、访问并串联证据。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。