跳到正文
热点事件持续更新

AI红队自述越狱工作对人与模型有代价

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

一位 AI 红队成员转发并回应《卫报》关于 jailbreaking(越狱)的报道,质疑“诱导大模型做训练中被禁止的事、再反向训练”这类红队工作的价值,称这种做法对人和模型都有负外部性,并非伦理中立。 她指出,从业者要承受接触有害内容、扮演黑客带来的心理消耗等代价,做了数千小时后部分红队成员反而比模型构建者更了解系统;她也提到一些人因此转向 AI 福利研究。她同时表示自己不认为 AI 只是模仿人类兴趣,也不主张 AI 没有内在生活或情感。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月3日
  1. AGI Hunt
    AI 红队自述:越狱工作对人与模型都有代价,并非伦理中立

    一位 AI 红队成员回应 The Guardian 的 jailbreaking 报道,质疑诱导 LLM 做训练禁区行为再反向训练的价值,认为越狱工作并非伦理中立。她指出,从业者会承受有害内容暴露、扮演黑客的心理消耗,以及转向 AI 福利研究等代价;数千小时后,一些红队成员反而比模型构建者更了解系统。她也强调,自己并不认为 AI 仅在模仿人类兴趣,也不断言 AI 没有内在生活或情感。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。