AI 研究者：开源生态缺少与 Qwen/DeepSeek 词表对齐的 2B-40B 模型梯队

AI 研究者 bclavie 指出，开源生态缺少一套覆盖 2-18B dense 模型和 15-40B MoE 模型、且 tokenizer 与 GLM、DeepSeek 或 Qwen 对齐的模型梯队。研究者认为，词表共享且可横向比较的模型能支撑实验，目前 Qwen 的 tokenizer 已逐渐成为开源实验的事实标准。