跳到正文
AGI Hunt· pcuenq·· 4 小时前AI 评分44

swift-transformers 1.4.0 发布:分词对齐 Transformers,解码行为有破坏性变更

AI 导读

Hugging Face 发布 swift-transformers 1.4.0,含破坏性解码变更。cleanuptokenizationspaces 缺省改为 false,BPE 即使设为 true 也跳过清理;编码与 token ID 不变,但解码文本可能变化。

来源:AGI Hunt · agihunt.info