BatchBench显示专用小模型胜过Claude判读
热点事件持续更新
BatchBench显示专用小模型胜过Claude判读
1 篇报道1 个报道来源45 分钟前更新
先了解这件事
AI 综述
gklambauer发布Cell Painting生物医学影像基准BatchBench及模型对比结果:在该任务上,Claude Opus 5.5的判读准确率接近随机水平,花费156美元;采用测试时自适应方案的ResNet18效果远好于Claude,费用不到0.20美元,便宜280倍以上。 BatchBench重点检验同一实验不同批次影像之间的系统性批次效应。结果表明,至少在Cell Painting任务中,经过测试时自适应的专用小模型能以更低成本应对这一偏差,其表现不能直接外推到其他影像任务或模型。
AI 根据报道生成 · 15 分钟前更新
最新进展11月12日 15:05
BatchBench显示前沿模型判读生物医学影像接近随机,小模型便宜280倍报道时间线
沿着报道,了解事件的不同侧面。
11月12日
- AGI HuntBatchBench显示前沿模型判读生物医学影像接近随机,小模型便宜280倍
BatchBench评测显示,Claude Opus 5.5在Cell Painting生物医学影像任务上的判读准确率接近随机水平,费用为156美元。采用测试时自适应方案的ResNet18效果远好于前沿大模型,费用不到0.20美元,便宜280倍以上。该基准重点检验同一实验不同批次影像间的系统性偏差,即批次效应。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。