跳到正文
热点事件持续更新

JetBrains开源Mellum 2.1 MTP模型

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

JetBrains 在 Hugging Face 发布并开源 Mellum2.1-12B-A2.5B-Thinking 的 MTP 版本,以额外训练的一个 Transformer 块生成推测草稿,再由主模型逐词元验证。JetBrains 称,在输出保持不变的前提下,该方案可将解码速度提升1.4至1.8倍,草稿接受率约为90%。 模型权重和推理配置已同步提供,可用于 vLLM 0.33及以上的 MTP 推测解码、Transformers 5.20及以上的 generate 调用,以及 llama.cpp 的 draft-mtp 模式。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. AGI Hunt
    JetBrains 开源 Mellum2.1 Thinking MTP 头,解码提速 1.4–1.8 倍

    JetBrains 在 Hugging Face 发布 Mellum2.1-12B-A2.5B-Thinking 的 MTP 版本,将额外一个 Transformer 块与主模型联合训练,并在推理时用作 speculative draft。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。