跳到正文
热点事件持续更新

图解采样温度与模型输出非确定性

1 篇报道1 个报道来源25 分钟前更新

先了解这件事

AI 综述

cfregly 发布角色化图解,说明采样温度如何影响大模型下一词元的选择:在同一概率分布下,T=0 的贪心解码会确定性地选择得分较高的选项,T=1 则按概率随机采样。 图解还指出,即使同一提示词对应的概率分布为 Lori 88%、Alice 12%,两次独立随机采样也可能得到不同输出,高概率选项也可能未被选中。

AI 根据报道生成 · 11 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月11日
  1. AGI Hunt
    图解大模型采样温度与输出非确定性

    cfregly 发布角色化图解,说明采样温度如何改变 LLM 的 next-token 决策:同一分布下,T=0 贪心解码会确定性地选择得分更高的 Lori,T=1 则按概率随机抽样。另一组图解指出,即使同一 prompt 的概率分布为 Lori 88%、Alice 12%,两次独立随机采样也可能产生不同输出,高概率选项同样可能落选。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。