跳到正文
热点事件持续更新

NVIDIA开源转写模型并推进vLLM原生集成

11 篇报道5 个报道来源25 分钟前更新

先了解这件事

AI 综述

NVIDIA发布开放权重语音转写模型Nemotron 3.5 Transcribe及Granary v2数据集,支持最多40种语言、31种语言与英语互译、最长1小时录音及最多8名说话者,但不支持直播音频。tarushagarwal团队称,该模型在20个模型的真实电话录音基准中取得2.48%的最低词错误率;此前Artificial Analysis测得总体词错误率为2.8%。 vLLM项目正在审核该模型的原生集成PR,拟支持30B-A4B权重、FP8和NVFP4量化版本及OpenAI兼容接口;同类功能目前可经NeMo Speech的vLLM 0.32.0插件使用,原生集成尚未完成审核。

AI 根据报道生成 · 18 分钟前更新

事件进展

3 个进展

  1. 10月29日 00:36 · 1 篇报道
    公布Nemotron 3.5转写基准结果
    AGI Hunt:NVIDIA Nemotron 3.5 Transcribe 真实电话转写词错误率 2.48%,居 20 个模型首位
  2. 10月28日 23:25 · 2 篇报道
    vLLM 推进 Nemotron 转写原生集成
    AGI Hunt:vLLM 推进 Nemotron-3.5-Transcribe 原生集成
  3. 10月28日 22:58 · 3 篇报道
    NVIDIA开源Nemotron 3.5 Transcribe
    TechCrunch AI:Nvidia 发布开放权重语音转录模型 Nemotron 3.5 Transcribe

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. AGI Hunt
    NVIDIA Nemotron 3.5 Transcribe 真实电话转写词错误率 2.48%,居 20 个模型首位

    tarushagarwal 团队在语音转文本基准中测试 NVIDIA Nemotron 3.5 Transcribe,其在真实电话录音上的词错误率(WER)仅为 2.48%,20 个模型中最低。基准将真实通话与干净测试音频分开评分,通话数据来自 Ocular 授权的真实对话录音。

10月28日
  1. AGI Hunt
    英伟达开源 Nemotron 3.5 Transcribe 语音识别模型,参数仅为最强开源竞品六分之一

    英伟达发布开源语音识别模型 Nemotron 3.5 Transcribe,单一模型支持转录、说话人识别和翻译,并可通过文本 prompt 接受指令。该模型在多个 benchmark 上领先,激活参数量仅为最强开源竞品的六分之一,同时发布超过 80 万小时语音数据集及微调工具。

  2. The Decoder精选
    Nvidia 发布开源 Nemotron 3.5 Transcribe 语音识别模型

    Nvidia 发布开源语音识别模型 Nemotron 3.5 Transcribe,可在单模型中完成转写、翻译、说话人识别和音频问答。该模型支持 40 种语言,最多处理 1 小时音频和 8 名说话人,30B 参数中每步激活约 4B,可在单张 Nvidia GPU 上运行。

  3. AGI Hunt
    vLLM 审核 NVIDIA Nemotron-3.5-Transcribe 原生集成 PR

    vLLM 项目正审核一项 PR,为 NVIDIA Nemotron-3.5-Transcribe 语音语言模型增加原生集成。

  4. AGI Hunt
    vLLM 推进 Nemotron-3.5-Transcribe 原生集成

    vLLM 项目宣布 NVIDIA Nemotron-3.5-Transcribe 原生集成 PR 已进入 review(#64282)。该 PR 新增语音塔架构与 OpenAI 兼容的含音频对话、转写端点,支持 30B-A4B 权重及 FP8、NVFP4 量化变体、MTP 和 DFlash2 投机解码,并可通过 NeMo Speech 的 vLLM 0.32.0 插件运行。

  5. Techmeme
    Nvidia 发布 Nemotron 3.5 Transcribe 与 Granary v2

    Nvidia 发布开放权重模型 Nemotron 3.5 Transcribe,用于多语言音频转录与翻译。其同期推出开源语音数据集 Granary v2。

  6. AGI Hunt
    NVIDIA 开源 Nemotron 3.5 Transcribe 30B 语音识别模型

    NVIDIA 开源 Nemotron 3.5 Transcribe(30B-A4B)语音识别模型,模型权重、数据与训练配方全部开放,并上架 Hugging Face。配套提供 Granity v2 开放语音数据、NeMo Speech 微调工具和领域适配教程;医疗 ASR 案例中,微调相比最佳 prompt 使词错率相对降低 45.8%。

  7. AGI Hunt
    NVIDIA 开源 Nemotron 3.5 Transcribe 语音转录模型

    NVIDIA 开源 Nemotron 3.5 Transcribe 语音转文字模型,总参数 30B、激活参数仅 4B。Artificial Analysis 评测显示其 WER 为 2.8%,并列开源第一;在 DeepInfra 托管端点上,速度因子达 75 倍,转录 1 分钟音频不到 1 秒,千分钟成本约 2 美元。

  8. NVIDIA Blog
    NVIDIA RTX Spark 笔记本新增 Nemotron 3.5 Transcribe、Agent 工具与游戏支持

    NVIDIA 宣布 RTX Spark 笔记本获得 Nemotron 3.5 Transcribe、LFM3 开放模型、GPU 资源管理及多项游戏功能更新。

  9. TechCrunch AI
    Nvidia 发布开放权重语音转录模型 Nemotron 3.5 Transcribe

    Nvidia 发布 Nemotron 3.5 Transcribe 开放权重模型及第 2 版 Granary 开源语音数据集,支持最多 40 种语言转录。该模型可将 31 种语言与英语互译,处理最长 1 小时录音并区分最多 8 名说话者,参数规模为 30B,可在单颗芯片上运行,但不支持直播音频。

  10. AGI Hunt
    NVIDIA 发布 Nemotron 3.5 Transcribe 与 Granary v2 转写模型

    NVIDIA 发布开源语音识别模型 Nemotron 3.5 Transcribe,并配套推出 Granary v2 数据集,面向多语言智能转写场景。该模型支持通过 Prompt 适配定制,2.8% WER 使其并列开源第一。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。