MDU基准评测多语言文档理解模型
热点事件持续更新
MDU基准评测多语言文档理解模型
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
MDU论文作者发布多语言文档理解基准，以23,146个样例覆盖英语、法语、德语、意大利语和西班牙语的13类任务，并在统一协议下评测45个1.7B至235B参数的开源权重视觉语言模型及1个商用系统。 参评模型的最高平均分为69.0，仅8个系统达到65分以上；两个最佳成绩均来自27B模型，显示模型规模更大并不必然带来更强的多语言文档理解表现。
AI 根据报道生成 · 2 小时前更新
最新进展11月14日 17:16
MDU 多语言文档理解基准评测 45 个 VLM，最佳平均分仅 69.0报道时间线
沿着报道，了解事件的不同侧面。
11月14日
- AGI HuntMDU 多语言文档理解基准评测 45 个 VLM，最佳平均分仅 69.0
新论文发布 MDU 多语言文档理解基准，以 23146 个样例覆盖 13 类任务和 5 种语言，统一评测 45 个开源权重 VLM 及 1 个商用系统。最佳平均分为 69.0，仅 8 个系统达到 65 分以上，且两个最佳成绩来自 27B 模型，显示基准远未饱和、模型越大并不必然越强。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。