文件检索设计或降低GPT智能体准确率
热点事件持续更新
文件检索设计或降低GPT智能体准确率
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
UC Riverside与UC Irvine的一项研究发现,在智能体框架中将超长工具输出写入文件、再按需检索,可能使GPT系列模型用自行生成的近似值替代权威结果,从而降低答题准确率。 研究使用地球化学模拟器PHREEQC生成最长84.68万字符的报告,让智能体回答158道经实际执行验证的选择题,以比较这种文件检索设计与把输出直接放入上下文等做法的差异。论文结论针对上述GPT模型和实验设置,尚不能直接外推到所有模型、工具或检索方案。
AI 根据报道生成 · 2 小时前更新
最新进展10月23日 08:17
UC Riverside与UC Irvine研究文件检索导致GPT Agent准确率下降报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- AGI HuntUC Riverside与UC Irvine研究文件检索导致GPT Agent准确率下降
UC Riverside与UC Irvine发现,agent harness将超长工具输出写入文件并按需检索时,GPT系模型可能用自行生成的近似值替代权威结果,导致答案准确率下降。研究使用USGS地球化学模拟器PHREEQC生成长达84.68万字符的报告,并让agent回答158道经执行验证的选择题。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。