跳到正文
AGI Hunt· dl_weekly·· 2 小时前AI 评分49

AutoBench Router Benchmark 实测:7 个 LLM 路由器均未跑赢固定调用中档模型

实测七个 LLM 路由器无一跑赢固定调用单个中档模型

AI 导读

AutoBench Router Benchmark(ARB)审计 7 个商业与开源 LLM 路由器,结果显示其质量与成本综合表现均未胜过固定调用单一中价模型。理想逐题选模可达 100% Delta-Hit、每题 $0.0018,但 17 个设置无一达标;固定 GPT-5.6 Luna 为 85.3%、每题 $0.0043,且 5/17 设置至少 90% 流量指向同一模型。

来源:AGI Hunt · agihunt.info