跳到正文
AGI Hunt· Reasonable_Royal_621·· 3 小时前AI 评分44

CacheVerifier 实测:训练标签 30% 噪声以内,微调收益依然为正

实测:训练标签 30% 噪声以内,微调收益依然为正

AI 导读

CacheVerifier 团队实测发现,训练标签在 30% 噪声以内时,微调收益仍为正。实验使用 4000 条训练对;LMArena AUC 增益在 30% 噪声时仍为 +0.028。三个数据集的盈亏平衡点为 31–32%,40% 噪声时降至 -0.101;作者提醒随机翻转实验难以完全外推结构性噪声。

来源:AGI Hunt · agihunt.info