跳到正文
热点事件持续更新

1Cat本地推理实测领先Strata

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Reddit 用户 Acceptable_Bell_1791 在 4×16GB Tesla V100 上实测 Qwen3.8-Flash-Next UD-IQ3XXS 量化模型:加入专家缓存的 1Cat 单流解码速度为 125–143 tok/s,领先 Strata 及其分叉的 75–79 tok/s。 预填充方面,1Cat 在 2.6K–30K tokens 的中短提示下领先,如 2.6K 时为 1850 对 861 tok/s;但在 96.5K 长提示下,Strata 反超至 3384 对 2649 tok/s。Strata 的 MTP draft 接受率略高,约 0.6–0.7,但实测解码速度仍低于 1Cat。

AI 根据报道生成 · 24 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月16日
  1. AGI Hunt
    4x V100 实测:1Cat 凭专家缓存解码 140 tok/s,碾压 Strata 的 75 tok/s

    Reddit 用户在 4x 16GB Tesla V100 上实测:1Cat 借专家缓存以 125-143 tok/s 单流解码,领先 Strata 及其分叉的 75-79 tok/s。模型为 Qwen3.8-Flash-Next UD-IQ3XXS 量化版;103K prompt 连跑三次,1Cat 从 99.9 升至 138.4 tok/s。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。