跳到正文
AGI Hunt· francoisfleuret·· 3 小时前AI 评分34

François Fleuret:智能诞生于代际对话,蒸馏只是穷版替代

AI 导读

François Fleuret 提出,智能产生于代际模型之间的主动对话,而非单向压缩教师模型输出,当前蒸馏只是这一过程的「穷人版」。他认为模型训练需要「父母」式前代模型参与交互,并主张从课程学习与生成式数据训练角度重新理解知识传递。

来源:AGI Hunt · agihunt.info