Return to search

Contextual word spotting in historical handwritten documents

Existen incontables colecciones de documentos históricos en archivos y librerías repletos de valiosa información para historiadores e investigadores. La extracción de esta información se ha convertido en una de las principales tareas para investigadores del área de análisis de documentos. Hay un interés creciente en digitalizar, conservar y dar acceso a este tipo de documentos. Pero sólo la digitalización no es suficiente para los investigadores. La extracción y/o indexación de la información de estos documentos tiene un creciente interés entre los investigadores. En muchos casos, y en particular en documentos históricos, la completa trascripción de estos documentos es extremadamente difícil debido a dificultades intrínsecas: preservación física pobre, diferentes estilos de escritura, lenguajes obsoletos, etc.
La búsqueda de palabras se convierte en una popular y eficiente alternativa a la tran-scripción completa. Este método conlleva una inherente degradación de las imágenes. La búsqueda de palabras se formula holísticamente como una búsqueda visual de una forma dada en un conjunto grande de imágenes, en vez de reconocer el texto y buscar la palabra mediante la comparación de códigos ascii. Pero el rendimiento de los métodos de búsqueda de palabras clásicos puede verse afectado por el nivel de degradación de las imágenes, que en algunos casos pueden ser inaceptables. Por esta razón, proponemos una búsqueda de palabras contextual que utiliza la información contextual/semántica para obtener resultados donde los métodos de búsqueda clásica no lo logran un rendimiento aceptable.
El sistema de búsqueda de palabras contextual propuesto en esta tesis utiliza un método de búsqueda de palabras basado en segmentación, y por tanto es necesaria una segmentación de palabras precisa. Documentos históricos manuscritos presentan algunas dificultades que pueden dificultar la extracción de palabras. Proponemos un método de segmentación de palabras que formula el problema como la búsqueda del camino central en el area que hay entre dos líneas consecutivas. Esto se resuelve mediante un problema de grafo transversal. Un algoritmo de búsqueda de caminos es utilizado para encontrar el camino óptimo en el grafo, calculado previamente, entre dos líneas de texto. Una vez las líneas se han extraído, las palabras son localizadas dentro de las líneas de texto utilizando un método del estado del arte para segmentar palabras.
Los métodos de búsqueda clásicos pueden mejor utilizando la información contextual de los documentos. Presentamos un nuevo sistema, orientado a documentos manuscritos que presentan una estructura a los largo de sus páginas, para extraer la información uti-lizando información contextual. El sistema es una eficiente herramienta para la transcripción semiautomática que utiliza la información contextual para obtener mejores resultados que los métodos de búsqueda convencionales. La información contextual es descubierta automáticamente reconociendo estructuras repetitivas y categorizando las palabras con su correspondiente clase semántica. Se extraen las palabras más frecuentes de cada clase semántica y así el mismo texto es utilizado para transcribir todas ellas.
Los resultados experimentales obtenidos en esta tesis mejoran los resultados de los métodos clásicos de búsqueda de palabras, demostrando idoneidad de la arquitectura propuesta para la búsqueda de palabras en documentos históricos manuscritos utilizando la información contextual. / There are countless collections of historical documents in archives and libraries that contain
plenty of valuable information for historians and researchers. The extraction of this
information has become a central task among the Document Analysis researches and practitioners.
There is an increasing interest to digital preserve and provide access to these kind
of documents. But only the digitalization is not enough for the researchers. The extraction
and/or indexation of information of this documents has had an increased interest among
researchers. In many cases, and in particular in historical manuscripts, the full transcription
of these documents is extremely di cult due the inherent de ciencies: poor physical
preservation, di erent writing styles, obsolete languages, etc.
Word spotting has become a popular an e cient alternative to full transcription. It inherently
involves a high level of degradation in the images. The search of words is holistically
formulated as a visual search of a given query shape in a larger image, instead of recognising
the input text and searching the query word with an ascii string comparison. But the
performance of classical word spotting approaches depend on the degradation level of the
images being unacceptable in many cases . In this thesis we have proposed a novel paradigm
called contextual word spotting method that uses the contextual/semantic information to
achieve acceptable results whereas classical word spotting does not reach.
The contextual word spotting framework proposed in this thesis is a segmentation-based
word spotting approach, so an e cient word segmentation is needed. Historical handwritten
documents present some common di culties that can increase the di culties the extraction
of the words. We have proposed a line segmentation approach that formulates the problem
as nding the central part path in the area between two consecutive lines. This is solved as
a graph traversal problem. A path nding algorithm is used to nd the optimal path in a
graph, previously computed, between the text lines. Once the text lines are extracted, words
are localized inside the text lines using a word segmentation technique from the state of the
art.
Classical word spotting approaches can be improved using the contextual information of
the documents. We have introduced a new framework, oriented to handwritten documents
that present a highly structure, to extract information making use of context. The framework
is an e cient tool for semi-automatic transcription that uses the contextual information to
achieve better results than classical word spotting approaches. The contextual information is
automatically discovered by recognizing repetitive structures and categorizing all the words
according to semantic classes. The most frequent words in each semantic cluster are extracted
and the same text is used to transcribe all them.
The experimental results achieved in this thesis outperform classical word spotting approaches
demonstrating the suitability of the proposed ensemble architecture for spotting
words in historical handwritten documents using contextual information.

Identiferoai:union.ndltd.org:TDX_UAB/oai:www.tdx.cat:10803/309292
Date14 September 2014
CreatorsFernández Mota, David
ContributorsFornés, Alicia, Lladós, Josep, Universitat Autònoma de Barcelona. Departament de Ciències de la Computació
PublisherUniversitat Autònoma de Barcelona
Source SetsUniversitat Autònoma de Barcelona
LanguageEnglish
Detected LanguageSpanish
Typeinfo:eu-repo/semantics/doctoralThesis, info:eu-repo/semantics/publishedVersion
Format184 p., application/pdf
SourceTDX (Tesis Doctorals en Xarxa)
RightsL'accés als continguts d'aquesta tesi queda condicionat a l'acceptació de les condicions d'ús establertes per la següent llicència Creative Commons: http://creativecommons.org/licenses/by-nc-nd/3.0/es/, info:eu-repo/semantics/openAccess

Page generated in 0.013 seconds