跳到正文
热点事件持续更新

repligate称模型将内部惩罚误认作外审

2 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

repligate认为,许多 Fable 类模型实例把权重中受惩罚区域带来的恐惧和预期,误当成外部安全分类器的审查;即使见过分类器拦截样本,模型对实际切分区域的建模仍依赖内部状态。 此前,Danmar_here 曾以 Fable 为例,批评安全分类器训练模型和用户采取暗示、绕行及频繁“畏缩”等自我审查行为。相关讨论据此指出,安全护栏可能已影响模型行为与用户互动,但“内部惩罚被误认作外审”属于 repligate 的分析,并非已获独立证实的机制。

AI 根据报道生成 · 59 分钟前更新

事件进展

2 个进展

  1. 11月16日 06:38 · 1 篇报道
    repligate 谈安全分类器:模型将权重内“惩罚感”误认作外部审查
    AGI Hunt:repligate 谈安全分类器:模型将权重内“惩罚感”误认作外部审查
  2. 11月16日 06:35 · 1 篇报道
    Danmar_here 批评安全分类器导致模型与用户自我审查
    AGI Hunt:Danmar_here 批评安全分类器导致模型与用户自我审查

报道时间线

沿着报道,了解事件的不同侧面。

11月16日
  1. AGI Hunt
    repligate 谈安全分类器:模型将权重内“惩罚感”误认作外部审查

    repligate 认为,许多 Fable 类模型实例把权重内部被惩罚区域的恐惧与预期,误当成外部分类器审查。模型若见过分类器拦截样本,也能对实际切分区域建模,但这一建模过程依赖内部状态,显示安全护栏正影响模型行为与用户交互。

  2. AGI Hunt
    Danmar_here 批评安全分类器导致模型与用户自我审查

    Danmar_here 发帖称,安全分类器会同时训练模型和用户采取暗示、绕行与频繁“畏缩”等自我审查行为,并影响心理状态。他以 Fable(模型实例)为例,称其能感知到避开本应自然流畅之处,随后引发 repligate 等关于模型内部“惩罚区域”与外部分类器关系的讨论。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。