真实Bug基准公布模型性能成本结果
热点事件持续更新
真实Bug基准公布模型性能成本结果
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
PawelHuryn公布自建Bug Hunt Benchmark结果:GPT-6.1 Sol修复105个真实bug的表现比上代GPT-5.6 Sol更强,同时价格低逾10倍;该测试覆盖两个仓库中前沿模型此前漏掉的105个bug,并非通用能力基准。 价格方面,GPT-6.1 Sol输入、输出价格较上代减半,缓存读取便宜4倍;OpenAI称缓存折扣为95%,但可能只是暂时优惠。发布当日其速度约为Opus 5.5的一半,OpenAI的Tibo表示数小时内将提速近两倍。Sonnet 5.5输入、输出价格虽为Opus 5.5的一半,但两者长会话中占主要成本的缓存读取价相同。
AI 根据报道生成 · 1 小时前更新
最新进展10月23日 16:10
105 个真实 bug 实测:GPT-6.1 Sol 比上代强 10 倍且更便宜报道时间线
沿着报道,了解事件的不同侧面。
10月23日
- AGI Hunt105 个真实 bug 实测:GPT-6.1 Sol 比上代强 10 倍且更便宜
PawelHuryn 用自建 Bug Hunt Benchmark 对 2 个仓库、105 个模型漏掉的 bug 实测 Opus 5.5、Sonnet 5.5 和 GPT-6.1 Sol。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。