跳到正文
热点事件持续更新

组合性评测透明度未解,RExBench仍存污染隐患

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究者指出,组合性评测的数据透明度问题仍未解决,RExBench 等评测仍面临数据污染隐患。她表示,构建 RExBench 时曾尝试预防污染;由于该评测要求研究想法具有新颖性,一旦数据泄露,就会直接破坏评测有效性。她同时肯定业界持续投入评测方向。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. AGI Hunt
    研究者谈组合性评测:数据透明度问题未解,RExBench 仍存数据污染隐患

    研究者指出,组合性评测的数据透明度问题仍未解决,RExBench 等评测仍面临数据污染隐患。研究者在构建 RExBench 时曾尝试预防污染,因为其严格要求研究想法具有新颖性,一旦数据泄露便会直接破坏评测有效性;她同时表示,业界持续投入评测方向值得肯定。

本事件热度走势

可比范围当前
9
可比范围峰值
1010月27日 02:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。