Datalab 开源 OCR 评测基准 OmniParseBench:16288 项通过/失败测试
Datalab 开源 OCR 评测基准 OmniParseBench,含 16288 项通过/失败测试,覆盖 92 种语言。
AI 深度解读
Datalab 发布 OmniParseBench 开源文档解析评测基准,用 16288 个通过或失败测试评估解析器,关注价值在于把 OCR 比较从单一总分转向可复核、可切片的文档任务。
- 基准覆盖 2937 页、2343 份文档和 92 种语言,测试内容包括文本出现、顺序、重复、表格单元格和版面类型。
- 总分由文本、表格和布局三类得分平均得到,结果可以按语言、结构、渲染和文档角色等标签拆分。
- 发布榜单中 Gemini 3.8 Flash 得分 92.9,Datalab accurate 得分 92.7,前三名总分差距为 1.3 个百分点以内。
- 该项目由解析器厂商 Datalab 发起,且部分测试构建使用了参评系统,读者需要关注潜在的样本和利益关系。
- 影响/看点:如果数据集、评分代码和测试来源持续可审计,开发者可以更准确地按自身文档类型选型;但基准覆盖范围、授权条件和与真实业务成本的差异,仍会限制总分的外推意义。
- 资料依据:
- Datalab OmniParseBench(2026-10-14):https://www.datalab.to/blog/omniparsebench
- MarkTechPost(2026-10-14):https://www.marktechpost.com/2026/10/14/datalab-omniparsebench-open-ocr-document-parsing-benchmark/
本内容由 AI 生成,仅供参考,请注意甄别