跳到正文
热点事件持续更新

卡内基梅隆发布智能体搜索价值评测基准

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

卡内基梅隆大学团队发布SearchHorizonBench及配套评测仓库,用于评估AI智能体预测追加搜索能否改善答案。研究覆盖45,632次独立执行、8,880次预测和3,168个问题,从行动成功预测、预期搜索收益和决策效用三个维度评分。 仓库提供评分记录、冻结预测、数值评测器和回放示例;保存数据的回放可在本地使用NumPy运行,无需模型或搜索API凭证。评测要求先冻结预测器再查看测试结果,新的前瞻性评测则使用独立队列。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. GitHub 新星仓库
    SearchHorizonBench:评估 AI 智能体搜索价值的基准

    Carnegie Mellon University 团队提出 SearchHorizonBench,用于评估 AI 智能体预测追加搜索能否改善答案的能力。研究覆盖 45,632 次独立执行、8,880 次预测和 3,168 个问题,并从行动成功预测、预期搜索收益和决策效用三个维度评分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。