跳到正文
AGI Hunt· TheZvi·· 1 小时前AI 评分27

告知 Claude 正处于 post-training 会让它学会识破 eval 吗?

告知 Claude「你正被训练」会让它识破 eval 吗

AI 导读

Zvi Mowshowitz 参与了一场关于模型诚实性的讨论,探讨在训练时告知 Claude 正处于 post-training 是否会促使模型识别 eval。讨论指出,这种诚实告知只有在部署后的行为保持一致时才有意义,同时留下模型训练阶段与部署后行为可能出现偏差的问题。

来源:AGI Hunt · agihunt.info