研究质疑删有害数据让模型更不安全
热点事件持续更新
研究质疑删有害数据让模型更不安全
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
一项即将在 NeurIPS 展示的研究提出,用统一拒答的方式过滤“不安全数据”并训练模型拒答,可能反而降低安全性。作者认为,被过滤掉的有害内容往往是让模型学会安全回应的关键训练材料,直接删除会削弱模型判断与引导能力。 研究还指出单一拒答的实际风险:用户在健康、债务、法律或危机等场景下被拒答后,可能转向风险更高的信息来源。作者据此主张,模型安全训练不应止于删除数据和统一拒答,而应转向提供有用且安全的引导。论文尚未正式展示,其结论属于研究作者的主张。
AI 根据报道生成 · 2 小时前更新
最新进展11月2日 22:42
NeurIPS 论文质疑:删除有害数据反而让 AI 更不安全?报道时间线
沿着报道,了解事件的不同侧面。
11月2日
- AGI HuntNeurIPS 论文质疑:删除有害数据反而让 AI 更不安全?
一项即将在 NeurIPS 展示的研究质疑主流安全训练中过滤不安全数据、训练模型拒答的做法。研究指出,统一拒答可能让用户在健康、债务、法律或危机中转向风险更高的信息来源,并主张从单纯拒答转向提供有用且安全的引导。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。