跳到正文
热点事件持续更新

ICLR改用4分制,评审量化噪声或增11倍

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

ICLR将论文评审评分从1—10分改为1—4分。据Gemini生成的测量理论分析,新量表产生的量化噪声方差约为原量表的11倍,3—4名评审的平均误差明显增大;1—4分只有20种组合和10个可能均值,可能导致论文分数趋同,削弱评审排序能力。该分析由Gemini生成,报道未提供独立验证。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月5日
  1. AGI Hunt
    ICLR 评分从 10 分制改为 4 分制,量化噪声放大 11 倍

    ICLR 将评审评分从 1-10 分改为 1-4 分后,Gemini 生成的测量理论分析认为,量化噪声方差约为 10 分制的 11 倍。3-4 位评审的平均误差显著增大,1-4 分制仅产生 20 种组合和 10 个可能均值,大量论文分数趋同,削弱了评分的排序功能。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。