跳到正文
AGI Hunt· Shoddy_Total9784·· 2 小时前AI 评分63

llama.cpp 本地小模型测试:命令门控将表格问答准确率从 54.0% 提升至 92.4%

本地小模型加代码侧门控:表格问答准确率 54% 升至 92%,零静默错误

AI 导读

一项非正式 A/B 测试显示,在 CPU 上运行 Qwen2.5 本地模型时,命令门控方案将表格问答准确率从 54.0% 提升至 92.4%。396 道题中两种方案答对 366 道,全新 holdout 集准确率为 49.1% 对 83.3%,静默错误从 51 个降至 0 个,Token 消耗和等效 API 成本分别减少 68% 和 74%。

来源:AGI Hunt · agihunt.info