跳到正文
热点事件持续更新

Bakouch称现有评测难追踪递归自我改进

1 篇报道1 个报道来源34 分钟前更新

先了解这件事

AI 综述

NLP研究者Elie Bakouch称,现有benchmark难以准确衡量AI研究真正关心的能力,也无法有效追踪递归自我改进(RSI)进展。他认为,track 1大概率已在性能和超参数设置上出现过拟合,社区若要评估RSI,需要设计难度显著更高的benchmark。

AI 根据报道生成 · 16 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月19日
  1. AGI Hunt
    Elie Bakouch 质疑:现有 benchmark 难以真正追踪 RSI 进展

    NLP 研究者 Elie Bakouch 质疑,现有 benchmark 无法恰当地追踪 AI 研究真正关心的能力与 RSI(递归自我改进)进展。他认为 track 1 大概率在性能和超参数上已过拟合,社区若要追踪 RSI,需要设计难度高得多的 benchmark。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。