DAIR.AI创始人呼吁AI转向科学评估
热点事件持续更新
DAIR.AI创始人呼吁AI转向科学评估
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
DAIR.AI创始人Elvis Omari发长帖呼吁AI行业停止以刷榜为主要目标,转向“硬核科学+评估”(evals),并认为开放域评估可能是下一波重要机会。他称,无论评估模型、复杂代码库还是业务功能,关键是正确测量待改进对象;面对开放式真实问题,还需要不同于可验证问题的评估与改进方法。DAIR.AI正在开展相关研究和构建,并邀请同行交流合作。
AI 根据报道生成 · 2 小时前更新
最新进展11月1日 00:39
DAIR.AI 创始人 Elvis Omari:别再刷榜,AI 下一波机会在认真做 evals报道时间线
沿着报道,了解事件的不同侧面。
11月1日
- AGI HuntDAIR.AI 创始人 Elvis Omari:别再刷榜,AI 下一波机会在认真做 evals
DAIR.AI 创始人 Elvis Omari 发长推呼吁 AI 从 benchmaxxing 转向“硬核科学 + evals”,并认为开放域评估是机会巨大的方向。他认为,无论面对模型、复杂代码库还是业务功能,核心都是正确测量待改进对象;开放式真实问题则需要不同于“可验证”问题的评估与改进方法。DAIR.AI 正开展相关研究与构建,欢迎同行交流合作。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。