跳到正文
热点事件持续更新

离线RL模型选择追问LSTD下界条件

2 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Nan Jiang 追问 van der Laan 论文提出的免调参离线 RL 模型选择方法:其理论条件中对 LSTD 矩阵奇异值下界的要求是否必需,还是可以放宽并加以改进。讨论集中于该方法的基础理论,以及模型选择与 LSTD 锦标赛之间的关系几何问题;目前未见对这一条件能否移除的明确结论。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月29日
  1. AGI Hunt
    离线 RL 模型选择方法追问:LSTD 奇异值下界是否必需

    Nan Jiang 就 van der Laan 论文的免调参模型选择方法追问:LSTD 矩阵的奇异值下界条件是否必需,或能否放宽改进。讨论聚焦该方法的理论基础,并关联离线 RL 模型选择与 LSTD 锦标赛的关系几何问题。

  2. AGI Hunt
    PBV:免调参的离线 RL 模型选择新方法引关注

    Lars van der Laan 团队提出 Pairwise Bellman Validation(PBV),用于离线强化学习与离线策略评估中的模型选择,可在候选中挑选 Q 函数或占用比估计器。PBV 免调参并提供 oracle 保证,Nan Jiang 就其与双方实验中使用的 LSTD 锦标赛的关系提问,引发同行跟进讨论。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。