卡内基梅隆发布智能体搜索价值评测基准
热点事件持续更新
卡内基梅隆发布智能体搜索价值评测基准
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
卡内基梅隆大学团队发布SearchHorizonBench及配套评测仓库,用于评估AI智能体预测追加搜索能否改善答案。研究覆盖45,632次独立执行、8,880次预测和3,168个问题,从行动成功预测、预期搜索收益和决策效用三个维度评分。 仓库提供评分记录、冻结预测、数值评测器和回放示例;保存数据的回放可在本地使用NumPy运行,无需模型或搜索API凭证。评测要求先冻结预测器再查看测试结果,新的前瞻性评测则使用独立队列。
AI 根据报道生成 · 2 小时前更新
最新进展10月26日 04:29
SearchHorizonBench:评估 AI 智能体搜索价值的基准报道时间线
沿着报道,了解事件的不同侧面。
10月26日
- GitHub 新星仓库SearchHorizonBench:评估 AI 智能体搜索价值的基准
Carnegie Mellon University 团队提出 SearchHorizonBench,用于评估 AI 智能体预测追加搜索能否改善答案的能力。研究覆盖 45,632 次独立执行、8,880 次预测和 3,168 个问题,并从行动成功预测、预期搜索收益和决策效用三个维度评分。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。