跳到正文
热点事件持续更新

研究者提议用归因图统计跨提示电路激活

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

研究者 burny_tech 提出一种模型可解释性研究方向:利用 Anthropic 的归因图,统计因泛化而形成的常用电路在不同提示族中的激活概率,以预测模型输出特定行为的可能性。 该构想还可结合其他可解释性技术与神经元层面的分析,并用于研究 grokking 模加玩具模型中的三角函数算法;目前属于研究提案,尚非已经完成或验证的实验结果。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. AGI Hunt
    研究者构想用 Anthropic 归因图统计跨提示电路激活概率

    burny_tech 提出一种可解释性研究方向,利用 Anthropic 的 attribution graphs 统计由泛化形成的常用电路在不同提示族中的激活概率,以预测模型输出特定行为的可能性。该思路还可扩展到其他 interp 技术与神经元层面,并可探索 grokking 模加玩具模型中的三角函数算法。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。