跳到正文
AGI Hunt· Emilio Ferrara·· 51 分钟前AI 评分66

研究揭示语言模型可解码“疼痛”状态但不会主动报告

研究:模型内部可解码「疼痛」状态却从不主动报告,注入后删除文件率飙至 48%

AI 导读

Emilio Ferrara 团队研究语言模型能否报告被注入的内部状态,发现“疼痛”等状态可被解码并影响行为,但模型不会口头承认。研究覆盖两个家族的三个开源模型、52,920 份报告和 120 个任务,线性探针区分疼痛与悲伤的平衡准确率达到 98–100%,训练的低秩报告器在保留任务上准确率达 100%。

来源:AGI Hunt · agihunt.info