跳到正文
热点事件持续更新

Ubicloud用约束解码提升工具调用准确率

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Ubicloud称,其在vLLM中启用约束解码后,Kimi和DeepSeek所服务的模型在K2VV ToolCall基准上的工具调用schema准确率由92%升至100%,并在验证所有线上模型版本后部署到生产环境。 该功能可通过vLLM 0.31的服务端参数`--tool-strict-level`按部署启用,并非所有操作默认免费或自动生效。Ubicloud还指出,部分模型若默认开启约束解码,可能因模型适配、语法转换及功能交互问题导致输出质量下降。

AI 根据报道生成 · 57 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月26日
  1. Hacker News
    vLLM 使用约束解码修复工具调用准确率问题

    Ubicloud 通过 vLLM 约束解码提升 Kimi 和 DeepSeek 的工具调用 schema 准确率。团队在 K2VV ToolCall 基准上将准确率从 92% 提升至 100%,并在 vLLM 0.31 中通过服务端参数启用该功能。文章还分析了默认启用后部分模型出现质量下降的模型适配、语法转换和功能交互问题。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。