跳到正文
AGI Hunt· TuhinChakr·· 9 小时前AI 评分47

SAE 论文修复 ICA 基线 bug,ICA 展现 LLM 可解释方向检测潜力

SAE 论文 ICA 基线存 bug 三年,修复后 ICA 找 LLM 可解释方向极强

AI 导读

研究者发现原始 SAE 论文的 ICA 基线存在评估 bug,修复后,ICA 在寻找 LLM 激活中的可解释方向上极具竞争力,且每层仅需几分钟。该发现纠正了持续三年的基线评估,可能改变对 SAE 与 ICA 方法相对性能的评价。

来源:AGI Hunt · agihunt.info