跳到正文
热点事件持续更新

研究者训练抗安全对齐擦除的小模型并开源实验仓库

1 篇报道1 个报道来源26 分钟前更新

先了解这件事

AI 综述

Lexsi Labs、Cohere 与 Hugging Face 团队训练了一个小型开源权重模型,用于抵抗“擦除安全对齐”(abliteration)攻击,并公开了完整的实验仓库与报告 TamperResistanceOSModels,模型基于 Cohere 的 Tiny Aya Global。 该团队称,一命令去对齐的硬化版 v2 在 n=100 测试中对廉价攻击保持 100% 拒绝;在最强攻击下,有害回答率从 91% 降到 40%,但 IFEval 分数下降 10 个百分点,即抗攻击能力增强伴随部分通用能力与指令遵循能力回落。

AI 根据报道生成 · 17 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月16日
  1. AGI Hunt
    TamperResistanceOSModels 团队训练抗篡改小模型,一条命令去安全对齐,硬化版拒绝率升至 100%

    团队基于 Cohere Tiny Aya Global 训练抗 abliteration 的小型开源模型,并公开 TamperResistanceOSModels 仓库。n=100 测试中,硬化版 v2 在廉价攻击下保持 100% 拒绝,最强攻击下有害回答率由 91% 降至 40%,但 IFEval 下降 10 个百分点。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。