跳到正文
热点事件持续更新

CamThink公布小模型Agent评测结果

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

CamThink公布NeoMind评测结果:≤4B小模型的Agent严格通过率差异明显,Qwen3.5-4B·T1.0为51.4%,开启thinking后升至55.1%;所有参测模型在多步任务上均明显掉分。 测试采用138个中英双语任务,32K上下文和Q4量化;“严格通过”要求命令执行成功且运行后状态断言通过。云端API模型DeepSeek-flash和GLM-5.3分别取得81.2%和76.8%,高于本地模型。思考模式对Spark-X2.6-1.7B提升最大,严格通过率由43.5%升至63.8%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. AGI Hunt
    ≤4B 小模型 Agent 实测:Qwen3.5-4B 得分 51.4%,思考模式最多提升 20 分

    CamThink 用 NeoMind 评测集实测 6 款 4B 以下模型,Qwen3.5-4B·T1.0 严格通过率为 51.4%。开启 thinking 后,Spark-X2.6-1.7B 从 43.5% 升至 63.8%,Qwen3.5-4B 从 41.3% 升至 55.1%。所有模型在多步任务上均明显掉分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。