AI2研究员质疑Olmo 3评测方式
热点事件持续更新
AI2研究员质疑Olmo 3评测方式
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
AI2研究员JJitsev公开质疑Olmo 3的评测展示，称其刻意回避与Qwen等公认强基线对比，并通过精选评测集和对比模型夸大改进幅度，因此给出“取消资格”的结论。 这场批评指向开源模型评测中的基准选择偏差：JJitsev认为，仅展示有利结果不足以证明模型真实性能。现有信息未显示Olmo 3团队对此作出回应。
AI 根据报道生成 · 1 小时前更新
最新进展11月5日 09:10
AI2 研究员质疑 Olmo 3 评测：刻意回避与 Qwen 等强基线对比报道时间线
沿着报道，了解事件的不同侧面。
11月5日
- AGI HuntAI2 研究员质疑 Olmo 3 评测：刻意回避与 Qwen 等强基线对比
AI2 研究员 JJitsev 质疑 Olmo 3 的评测展示方式，认为精选评测集和对比模型、回避 Qwen 等公认强基线，会掩盖改进的真实幅度，并给出“Disqualified”结论。这场争论聚焦开源模型评测的透明度与基准选择偏差。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。