AGI Hunt· HowDevelop·· 3 小时前AI 评分38
0.8B 微调 vega 在自有决策分类上击败 105B 的 Sarvam Prism
0.8B 微调模型在自有决策分类上击败 105B 的 Sarvam Prism
AI 导读
0.8B 微调 vega 在自有决策分类中击败 105B 的 Sarvam Prism,2000 次决策准确率为 71.3%,后者为 69.8%。本地推理耗时 358ms,速度为远程 940ms 的 2.6 倍,成本为 0 卢比,远程每次调用 1.51 卢比;Kaggle 复现 notebook 已公开,但 Prism 在校准和通用 benchmark 上仍领先。
来源:AGI Hunt · agihunt.info