模型价值等于省下的条件熵
热点事件持续更新
模型价值等于省下的条件熵
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
AGI Hunt作者提出,模型发布的价值可用其帮助用户补全认知时消除的“条件熵”衡量;当世界变化加快、信息更加混乱,先验不确定性上升,模型可消除的熵占比随之缩小,模型公司的商业化将面临更大阻力。 文章还介绍 mechanistic shaping:在选定层计算概念方向向量vt,并通过λ倍依赖惩罚项抑制不需要的概念;随着模型内部表征漂移,该方向需要周期性重新计算。
AI 根据报道生成 · 56 分钟前更新
最新进展11月6日 08:11
模型价值等于省下的条件熵:世界越乱,模型公司越难赚钱报道时间线
沿着报道,了解事件的不同侧面。
11月6日
- AGI Hunt模型价值等于省下的条件熵:世界越乱,模型公司越难赚钱
作者以信息论框架定义模型发布的影响力,将其视为模型帮助用户补全认知时消除的条件熵。若世界变化加快、信息混乱导致先验熵快速上升,模型可消除的熵占比将缩小,模型公司因而面临逆风。文章还介绍 mechanistic shaping:在选定层计算概念方向向量 vt,以 λ 倍依赖惩罚项抑制不想要概念,并随表征漂移周期性重算方向。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。