AGI Hunt· randall_balestr·· 3 小时前AI 评分49
LeVJEPA 1.5 Large 发布:以 1/5.6 训练算力逼近 V-JEPA,作者呼吁改进预训练损失
LeVJEPA 1.5 Large 用 1/5.6 算力逼近 V-JEPA,作者称应重视预训练损失改进
AI 导读
Lukas Kuhn 发布 LeVJEPA 1.5 Large,在图像和视频基准上缩小了与 V-JEPA 的差距,训练算力仅为后者的 1/5.6。其数据量少一个数量级以上,checkpoint 已开放;转发者 randall_balestr 认为,相比堆叠数据和 GPU,SIGReg 改进预训练损失是值得重视的第一步。
来源:AGI Hunt · agihunt.info