OmniDocBench

OmniDocBench es un benchmark de análisis de documentos: puntúa lo bien que un modelo convierte páginas PDF de muchos tipos en texto, tablas y fórmulas.

  • Uso de modelos
  • Actualización

OmniDocBench se presentó en un artículo de diciembre de 2024, con código y datos en GitHub bajo opendatalab. Sus páginas provienen de nueve fuentes documentales, incluidos artículos académicos, libros de texto, notas manuscritas y periódicos densos, con anotaciones para 19 categorías de maquetación y 15 etiquetas de atributos. La mayoría de las fichas de modelos OCR de este sitio citan una puntuación en él.

El benchmark se ha revisado, con versiones como v1.5 y v1.6, y conjuntos derivados como Real5-OmniDocBench, que el equipo de PaddlePaddle construyó a partir de los datos de la v1.5 con páginas escaneadas, deformadas y fotografiadas. Las puntuaciones de versiones distintas no son comparables, y los números de este sitio son los de los propios desarrolladores. Ejecuta un modelo sobre tus propios documentos para ver cómo se defiende.

Términos relacionados

  • OCR y análisis de documentos El OCR convierte en texto la imagen de un texto; el análisis de documentos va más allá y reconstruye tablas, fórmulas, gráficos y el orden de lectura, normalmente como Markdown.
  • Benchmark (prueba de referencia) Un benchmark es una prueba estandarizada para comparar modelos, como un conjunto de preguntas de matemáticas, programación o conocimiento; las puntuaciones son útiles pero fáciles de sobreinterpretar.

Todos los términos