Segmenta??o de pessoas em imagens est?ticas baseada em esqueleto

Made available in DSpace on 2015-04-14T14:49:49Z (GMT). No. of bitstreams: 1
439268.pdf: 3839238 bytes, checksum: fd0fa234ac3d8f99019784f88a77547f (MD5)
Previous issue date: 2012-04-20 / The segmentation of people (automatic or semi-automatic) in still images is a very challenging task, mainly due to several factors in the real world, such as those related to the lighting of the scene where the image was captured, shadows, image noise, occlusions, high similarity of the object of interest with the background of the scene and the lack of information inherent in depth when a scene is captured into a 2D image. In this work we present a skeleton-based model for human segmentation in still images. The input data of the model, related to the skeleton model, can be obtained automatically (using an algorithm for 2D pose estimation of people in images, for example) or manually (through user interaction), depending on the particular application. The skeleton model is used to guide the segmentation by taking into account color information, brightness, angle constraints and anthropometric parameters. In a general way, the main idea of the proposed approach is to build a graph around the skeleton model, for a given input image, and find out the best path in this graph that satisfies a certain condition (e.g., the one that maximizes a certain energy criterion), thus generating the contour of the person in the picture.It is also being proposed in this work an approach to measure quantitatively the experimental results, from information provided through user interaction. The experimental results demonstrate that the proposed model generates satisfactory results for non-trivial images containing people with varied appearances and poses (containing self-occlusions), in various complex environments (and uncontrolled), with different lighting conditions and image quality. The results obtained using the proposed model was also compared with those obtained by a work considered state of the art. Our experiments indicate that the proposed model adapts better to the contours, while the human body shape priors in the confronted work enforce a smoother contour.The proposed segmentation model generates a closed contour (for each person in the image) with semantic information included, (e.g., each contour point is associated with a particular body part), which can be used for various purposes (for example, construction of virtual humans with features extracted from the image, methods for clothes estimation in images, estimation of the human shape under the clothes, etc.). / A segmenta??o (autom?tica ou semi-autom?tica) de pessoas em imagens est?ticas ? uma tarefa bastante desafiadora, principalmente devido a diversos fatores do mundo real, como por exemplo, fatores relacionados ? ilumina??o da cena onde a imagem foi capturada, sombras, ru?dos na imagem, oclus?o, alta similaridade do objeto de interesse com o fundo da cena e a falta de informa??o inerente de profundidade quando uma cena ? capturada em uma imagem 2D. Nessa tese ? apresentado um modelo para segmenta??o de pessoas em imagens baseado em esqueleto. Os dados de entrada para o modelo proposto, associados ao modelo de esqueleto, podem ser obtidos de forma autom?tica (utilizando um algoritmo para estimativa de pose 2D de pessoas em imagens, por exemplo) ou manual (atrav?s de intera??o com usu?rio), dependendo da aplica??o em quest?o. O modelo de esqueleto guia a segmenta??o da pessoa na imagem levando em considera??o informa??es de cor, luminosidade, restri??es de ?ngulos e par?metros antropom?tricos. De uma forma geral, a id?ia principal da abordagem proposta ? construir um grafo ao redor do modelo de esqueleto, para uma determinada imagem de entrada, e buscar o melhor caminho nesse grafo que satisfa?a uma determinada condi??o (por exemplo, aquela que maximiza certo crit?rio de energia), gerando assim o contorno da pessoa na imagem.Tamb?m est? sendo proposta nessa tese uma abordagem para avaliar quantitativamente os resultados experimentais obtidos, a partir de informa??es fornecidas atrav?s de intera??o com usu?rio. Os resultados experimentais demonstram que o modelo proposto gera resultados satisfat?rios para imagens n?o triviais, contendo pessoas com apar?ncias e poses variadas (podendo haver membros parcialmente ocultos), em diversos ambientes complexos (e n?o controlados), com diferentes ilumina??es e qualidade de imagem, entre outros fatores. Os resultados obtidos com a utiliza??o do modelo proposto tamb?m foram comparados com os obtidos por um trabalho considerado estado-daarte e os experimentos indicam que o nosso modelo gera resultados mais coerentes para o contorno da pessoa, enquanto que os contornos obtidos pelo trabalho em quest?o apresentam formas mais suaves.O modelo de segmenta??o proposto ? capaz de gerar um contorno fechado (para cada pessoa na imagem) contendo informa??o sem?ntica, ou seja, cada ponto do contorno resultante est? associado a uma determinada parte do corpo, que pode ser utilizada para diversos fins (por exemplo, constru??o de humanos virtuais com caracter?sticas extra?das da imagem, m?todos para estimativa de roupas em imagens, estimativa da forma humana sobre as roupas, entre outros).

Identiferoai:union.ndltd.org:IBICT/oai:tede2.pucrs.br:tede/5179
Date20 April 2012
CreatorsJacques Junior, Julio Cezar Silveira
ContributorsMusse, Soraia Raupp
PublisherPontif?cia Universidade Cat?lica do Rio Grande do Sul, Programa de P?s-Gradua??o em Ci?ncia da Computa??o, PUCRS, BR, Faculdade de Inform?ca
Source SetsIBICT Brazilian ETDs
LanguagePortuguese
Detected LanguageEnglish
Typeinfo:eu-repo/semantics/publishedVersion, info:eu-repo/semantics/doctoralThesis
Formatapplication/pdf
Sourcereponame:Biblioteca Digital de Teses e Dissertações da PUC_RS, instname:Pontifícia Universidade Católica do Rio Grande do Sul, instacron:PUC_RS
Rightsinfo:eu-repo/semantics/openAccess
Relation1974996533081274470, 500, 600, 1946639708616176246

Page generated in 0.0027 seconds