跳到正文
AGI Hunt· davidbau·· 2 小时前AI 评分54

NNterp Encyclopedia 上线:现代 Transformer 架构变体可视化速查手册

NNterp Encyclopedia 上线:现代 Transformer 架构变体的可视化速查手册

AI 导读

davidbau 团队推出面向可解释性研究的 NNterp Encyclopedia,系统梳理现代 Transformer 的架构变体。指南汇总各模型家族的框图、特有结构与研究注意事项,并可交互查看 DeepSeek-V3 单个 block 的 61 层 DecoderLayer、128 头 latent attention 和 256 专家 top-8 MoE 标注。

来源:AGI Hunt · agihunt.info