AGI Hunt· art_zucker·· 4 小时前AI 评分63
Hugging Face tokenizers v1.0 RC4 发布，恢复 API 并提升编码性能
HF tokenizers v1.0 RC4 发布：找回 transformers/vLLM 依赖的 API，编码最高快 17 倍
AI 导读
Hugging Face tokenizers v1.0.0-rc.4 发布，恢复 transformers 和 vLLM 在 0.23 版本依赖的 Python API，编码速度最高提升 17 倍。
来源：AGI Hunt · agihunt.info