学者质疑BioReason基准评价可信度
热点事件持续更新
学者质疑BioReason基准评价可信度
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
斯坦福学者 Anshul Kundaje 公开质疑 BioReason 论文的评价可信度，称独立评估中随机打乱输入序列后，模型输出几乎不变，未显示模型利用了序列信息。他还指出，提示词存在数据泄漏；即使 Hugging Face 团队修复提示词，正负样本集合的混杂问题仍在，因此相关结果难以支撑论文结论。
AI 根据报道生成 · 2 小时前更新
最新进展11月3日 17:37
斯坦福学者质疑 BioReason 基准存在数据泄漏与样本混杂报道时间线
沿着报道，了解事件的不同侧面。
11月3日
- AGI Hunt斯坦福学者质疑 BioReason 基准存在数据泄漏与样本混杂
斯坦福学者 Anshul Kundaje 质疑 BioReason 基准的评价可信度，称独立评估中随机打乱输入序列后模型输出几乎不变，未体现对序列信息的学习。他还指出提示词存在数据泄漏，即使 Hugging Face 团队修复提示词，正负样本集合的选取仍混杂，难以支撑论文结论。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。