跳到正文
热点事件持续更新

代码知识图谱实测未显著提升编程Agent准确率

1 篇报道1 个报道来源53 分钟前更新

先了解这件事

AI 综述

JeremyCMorgan公布的基准测试显示,graphify 生成的代码调用与导入关系图未明显提升编程 Agent 的准确率,也未明显节省 token。测试使用 Claude Code(sonnet 5.5)和 Codex(gpt-6.1-sol),覆盖3个仓库、12个问题,共完成360次试验。 修改后的 hook 版本相较纯 grep 约节省13% token,但准确率基本持平;由于样本量较小,该结果仅可作为方向性参考。

AI 根据报道生成 · 35 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月10日
  1. AGI Hunt
    graphify 代码知识图谱 360 次实测:未明显提升编程 Agent 准确率

    graphify benchmark 使用 Claude Code(sonnet 5.5)与 Codex(gpt-6.1-sol),在 3 个仓库、12 个问题上完成 360 次试验;代码调用/导入关系图未明显提升编程 Agent 的准确率,也未明显节省 token。修改后的 hook 版本较纯 grep 约省 13% token,但准确率基本持平,且样本量小,仅供方向性参考。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。