GitHub 新星仓库·· 2 小时前AI 评分42
ElNeMeR70/ai-tok-cpp-cfg-earley-grammar-sampler：纯 C++20 的 Tokenizer 与结构化语法采样器
ElNeMeR70/ai-tok-cpp-cfg-earley-grammar-sampler
AI 导读
ElNeMeR70/ai-tok-cpp-cfg-earley-grammar-sampler 是一个基于 C++20 的 AI 引擎模块，覆盖 Tokenizers、BPE、Unigram 与 Structured Grammar Algorithm。
来源：GitHub 新星仓库 · github.com