跳到正文
热点事件持续更新

LambdaMix支持推理时切换多目标偏好

1 篇报道1 个报道来源36 分钟前更新

先了解这件事

AI 综述

谢菲尔德大学研究者提出参数高效的多目标后训练方法 LambdaMix:在冻结基座模型上,为各目标联合训练低秩适配器(LoRA),使模型能在推理时通过偏好向量选择、混合适配器并调整归一化奖励权重。 据研究者介绍,LambdaMix 一次训练后即可改变不同目标的偏好权重,无需重新训练,旨在突破标准后训练只能形成单一固定目标权重策略的限制。

AI 根据报道生成 · 15 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月9日
  1. AGI Hunt
    LambdaMix:一次训练让 LLM 在推理时按偏好向量切换多目标策略

    谢菲尔德大学研究者提出 LambdaMix,一种参数高效的多目标后训练方法,在冻结基座上为每个目标联合训练低秩 adapter(LoRA)。偏好向量可同时选择 adapter 混合并对归一化奖励加权,单次训练后即可在推理时调整偏好权重,无需重新训练。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。