AGI Hunt· TejasKumar_·· 2 小时前AI 评分66
GPT-3.5 Turbo Agent 重复投票揭示验证器状态校验盲区
Agent 成功完成任务的背后:验证器只查了「有没有点击」导致重复投票
AI 导读
一个用 GPT-3.5 Turbo 构建的 Hacker News 投票 Agent 实际投了两票，但只检查点击行为的验证器仍将其判定为成功。Agent 在登录页点击投票后，由 harness 完成登录，原投票实际生效却未被识别，导致 Agent 再次投票。Tejas 据此复盘了 harness 的状态校验逻辑，并整理了 4 个关键决策及区分 harness bug 与模型 bug 的方法。
来源：AGI Hunt · agihunt.info