AGI Hunt· kwangmoo_yi·· 3 小时前AI 评分36
ReSeed:仅训练第一步偏差,恢复蒸馏扩散模型丢失的多样性
AI 导读
ReSeed 提出通过仅训练首个去噪步的偏差适配器,恢复蒸馏扩散模型丢失的多样性。该方法冻结学生模型,以教师模型在同一 prompt 与初始噪声下的目标速度监督训练,之后关闭 bias;可训练参数仅占 0.002–0.004%,不增加采样步数,推理时无需调用教师,适用于图像与视频扩散模型,如 SD3.5-Medium。
来源:AGI Hunt · agihunt.info