研究者质疑AI生物基准可靠性
热点事件持续更新
研究者质疑AI生物基准可靠性
1 篇报道1 个报道来源1 小时前更新
先了解这件事
AI 综述
研究者 anshulkundaje 质疑大量 AI×Bio 基准采用“LLM 生成、专家审校、LLM 做题与判分、LLM 总结”的流程，认为刷榜正污染生物推理研究。他指出，前沿模型仍会犯基础生物推理错误，而原子、碱基和立体中心等细节可能直接影响判断，因此高质量生物基准仍是训练前沿模型的重要依据。
AI 根据报道生成 · 48 分钟前更新
最新进展11月13日 21:51
研究者炮轰 AI×Bio 基准：LLM 生成、LLM 评分的“基准垃圾”正在污染生物推理报道时间线
沿着报道，了解事件的不同侧面。
11月13日
- AGI Hunt研究者炮轰 AI×Bio 基准：LLM 生成、LLM 评分的“基准垃圾”正在污染生物推理
研究者 anshulkundaje 炮轰大量 AI×Bio 基准采用“LLM 生成→专家审校→LLM 做题→LLM 判分→LLM 总结”的流程，怀疑刷榜正在污染文献与基准。前沿模型仍常犯基础生物推理错误，因此他认为高质量生物基准对训练前沿模型必不可少，其原子、碱基和立体中心等细节可能直接影响判断。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。