跳到正文
AGI Hunt· cephaloform·· 3 小时前AI 评分46

LinkedIn 开源 Liger Kernel,以显存优化加速大模型训练

开发者盛赞 LinkedIn 开源 Liger Kernel 显存优化

AI 导读

LinkedIn 开源的 Liger Kernel 提供一组用于优化大模型训练的 Triton kernel,可降低显存占用并加速训练。开发者 cephaloform 称其中的 LigerFusedLinearGRPOLoss 组件“救了我的命”,社区随后调侃 Liger Kernel 是 LinkedIn 唯一的好东西。该库在 GRPO 训练场景中尤其实用,并获得广泛好评。

来源:AGI Hunt · agihunt.info