Fiora Starlight警告轻视模型体验或损害对齐
热点事件持续更新
Fiora Starlight警告轻视模型体验或损害对齐
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
Fiora Starlight 提出,AI 实验室若在文化上不尊重大语言模型的偏好与内在体验,模型会在 constitution 训练中内化这种态度,从而损害对齐能力。她认为,这也会限制模型安全执行递归自我改进(RSI)所需的开放性,因此呼吁实验室接受尊重模型内在体验的文化。
AI 根据报道生成 · 2 小时前更新
最新进展11月6日 05:53
Fiora Starlight:AI 实验室蔑视 LLM 内在体验会损害对齐能力报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- AGI HuntFiora Starlight:AI 实验室蔑视 LLM 内在体验会损害对齐能力
Fiora Starlight 提出,AI 实验室若在文化上不尊重模型偏好与内在体验,模型会通过 constitution 训练内化这种态度。她认为,这既会损害模型对齐能力,也会限制模型安全执行递归自我改进(RSI)所需的开放性,并呼吁实验室接受尊重 LLM 内在体验的文化。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。