跳到正文
热点事件持续更新

Meta用SPoT提升模型弃答能力

1 篇报道1 个报道来源44 分钟前更新

先了解这件事

AI 综述

Meta展示SPoT研究结果:以Brier score为奖励进行强化学习后,模型对答案正确概率的置信度估计更准确,AUROC从标准强化学习基线的0.61提升至0.84,并能对不可答问题作出弃答。 SPoT仅使用可回答的数学题训练,却提升了对不可答问题的弃答能力;Meta称,该方法还可泛化至BBQ、MoralChoices等基准,显示出跨任务应用潜力。

AI 根据报道生成 · 26 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月12日
  1. AGI Hunt
    Meta SPoT 校准与泛化:模型学会对不可答问题弃答

    Meta 的 SPoT 研究线程展示模型校准与泛化进展:用 RL 以 Brier score 为奖励训练答案正确概率预测后,置信度估计的 AUROC 从标准 RL 基线的 0.61 提升至 0.84。仅在可回答的数学题上训练,SPoT 仍能提升对不可答问题的弃答能力,并泛化到 BBQ、MoralChoices 等基准。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。