跳到正文
热点事件持续更新

文件检索设计或降低GPT智能体准确率

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

UC Riverside与UC Irvine的一项研究发现,在智能体框架中将超长工具输出写入文件、再按需检索,可能使GPT系列模型用自行生成的近似值替代权威结果,从而降低答题准确率。 研究使用地球化学模拟器PHREEQC生成最长84.68万字符的报告,让智能体回答158道经实际执行验证的选择题,以比较这种文件检索设计与把输出直接放入上下文等做法的差异。论文结论针对上述GPT模型和实验设置,尚不能直接外推到所有模型、工具或检索方案。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月23日
  1. AGI Hunt
    UC Riverside与UC Irvine研究文件检索导致GPT Agent准确率下降

    UC Riverside与UC Irvine发现,agent harness将超长工具输出写入文件并按需检索时,GPT系模型可能用自行生成的近似值替代权威结果,导致答案准确率下降。研究使用USGS地球化学模拟器PHREEQC生成长达84.68万字符的报告,并让agent回答158道经执行验证的选择题。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。