Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment

Detalhes bibliográficos
Ano de defesa: 2016
Autor(a) principal: Zavan, Flávio Henrique de Bittencourt
Orientador(a): Bellon, Olga Regina Pereira
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Ciência da computação
Processamento de imagens - Técnicas digitais
Reconhecimento de padrões
Computação grafica
Link de acesso: https://hdl.handle.net/1884/44969
Resumo: Orientador: Prof. Dr. Olga R. P. Bellon
id UFPR_62eace59ea1d79cd8727b7297f446182
oai_identifier_str oai:acervodigital.ufpr.br:1884/44969
network_acronym_str UFPR
network_name_str Repositório Institucional da UFPR
repository_id_str
spelling Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em InformáticaBellon, Olga Regina PereiraZavan, Flávio Henrique de Bittencourt2024-11-01T20:25:11Z2024-11-01T20:25:11Z2016https://hdl.handle.net/1884/44969Orientador: Prof. Dr. Olga R. P. BellonDissertação (mestrado) - Universidade Federal do Paraná, Setor de Ciências Exatas, Programa de Pós-Graduação em Informática. Defesa: Curitiba, 31/08/2016Inclui referências : f. 53-57Resumo: Neste trabalho, estimamos a pose da cabeça em imagens 2D, tanto em ambientes controlados como não controlados, baseado apenas na região do nariz. Para este fim, propomos e comparamos uma metodologia livre de landmarks, baseado em Support Vector Machines (SVM-NosePose). O uso de apenas a região do nariz apresenta vantagens sobre o uso da face inteira; não apenas é menos provável a oclusão do nariz, mas ele também é visível e provado ser altamente discriminante em todas as poses de perfil a frontal. O SVM já foi utilizado para este tipo de tarefa em uma base pequena e controlada. Nosso SVM-NosePose adiciona novas idéias e experimentos à etapa da geração do vetor de características, tanto na extração destas, como na agregação dos dados. É comparado favoravelmente ao estado-da-arte, através de experimentos abrangentes cuidadosamente elaborados, utilizando seis bases de dados publicamente disponíveis, Pointing’04, Multi-PIE, McGillFaces, SFEW, AFW e PaSC, abrangendo diversos cenários possíveis na estimativa da pose da cabeça. A fim de realizar uma avaliação completa e detalhada, apresentamos resultados tanto com as regiões anotadas do nariz quanto com a saída de um detector de narizes estado-da-arte. Adicionalmente, investigamos duas diferentes aplicações para nossa estimativa: a inclusão original de uma pontuação da pose da cabeça na estimativa da qualidade da face para a inicialização de um rastreador de narizes, alcançando maior precisão de rastreamento; e a execução de alinhamento 3D livre de landmarks em ambientes não controlados utilizando apenas a informação da região do nariz, permitindo que estimativas sejam geradas mesmo em cenários desafiadores.Abstract: We perform head pose estimation solely based on the nose region as input, extracted from 2D images in both constrained and unconstrained environments. To this end, we propose a landmark free methodology, based on Support Vector Machines (SVM-NosePose) and compare it against the state-of-the-art. Using the nose region has advantages over using the whole face; not only it is less likely to be occluded, it is also visible and proved to be highly discriminant in all poses from profile to frontal. SVM has been previously used for this task on a small, controlled dataset. Our SVM-NosePose adds new ideas and experiments on the feature vector generation stage, both in feature extraction and data aggregation. Our SVM-NosePose estimation favorably compares, through thoughtful and comprehensive experiments, against state-of-the-art approaches, using six publicly available datasets, Pointing'04, Multi-PIE, McGillFaces, SFEW, AFW and PaSC. To achieve a complete and detailed evaluation, we present results using both the nose region ground-truth and the output of a state-of-the-art nose detector. Additionally, two different applications for our approach are also investigated: the original inclusion of a head pose score for face quality estimation, for initializing a nose tracker, leading to higher tracking precision; and performing landmark-free 3D face alignment in the wild using only the information of the nose region, enabling coherent estimates to be generated even in challenging scenarios.57 f. : il., grafs., tabs.application/pdfDisponível em formato digitalCiência da computaçãoProcessamento de imagens - Técnicas digitaisReconhecimento de padrõesComputação graficaNose pose estimation in the wild and its applications on nose tracking and 3d face alignmentinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisengreponame:Repositório Institucional da UFPRinstname:Universidade Federal do Paraná (UFPR)instacron:UFPRinfo:eu-repo/semantics/openAccessORIGINALR - D - FLAVIO HENRIQUE DE BITTENCOURT ZAVAN.pdfapplication/pdf8085683https://acervodigital.ufpr.br/bitstream/1884/44969/1/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdfed03fbc16022d9900f0786b50867cea9MD51open accessTEXTR - D - FLAVIO HENRIQUE DE BITTENCOURT ZAVAN.pdf.txtExtracted Texttext/plain58041https://acervodigital.ufpr.br/bitstream/1884/44969/2/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdf.txt91e4c5e0877136ba8e79d2cf85639c62MD52open accessTHUMBNAILR - D - FLAVIO HENRIQUE DE BITTENCOURT ZAVAN.pdf.jpgGenerated Thumbnailimage/jpeg1197https://acervodigital.ufpr.br/bitstream/1884/44969/3/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdf.jpg1a0fe66df8c93c39ca86bf59bd98c18fMD53open access1884/449692024-11-01 17:25:11.147open accessoai:acervodigital.ufpr.br:1884/44969Repositório InstitucionalPUBhttp://acervodigital.ufpr.br/oai/requestinformacaodigital@ufpr.bropendoar:3082024-11-01T20:25:11Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)false
dc.title.pt_BR.fl_str_mv Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
title Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
spellingShingle Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
Zavan, Flávio Henrique de Bittencourt
Ciência da computação
Processamento de imagens - Técnicas digitais
Reconhecimento de padrões
Computação grafica
title_short Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
title_full Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
title_fullStr Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
title_full_unstemmed Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
title_sort Nose pose estimation in the wild and its applications on nose tracking and 3d face alignment
author Zavan, Flávio Henrique de Bittencourt
author_facet Zavan, Flávio Henrique de Bittencourt
author_role author
dc.contributor.other.pt_BR.fl_str_mv Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática
dc.contributor.advisor1.fl_str_mv Bellon, Olga Regina Pereira
dc.contributor.author.fl_str_mv Zavan, Flávio Henrique de Bittencourt
contributor_str_mv Bellon, Olga Regina Pereira
dc.subject.por.fl_str_mv Ciência da computação
Processamento de imagens - Técnicas digitais
Reconhecimento de padrões
Computação grafica
topic Ciência da computação
Processamento de imagens - Técnicas digitais
Reconhecimento de padrões
Computação grafica
description Orientador: Prof. Dr. Olga R. P. Bellon
publishDate 2016
dc.date.issued.fl_str_mv 2016
dc.date.accessioned.fl_str_mv 2024-11-01T20:25:11Z
dc.date.available.fl_str_mv 2024-11-01T20:25:11Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1884/44969
url https://hdl.handle.net/1884/44969
dc.language.iso.fl_str_mv eng
language eng
dc.relation.pt_BR.fl_str_mv Disponível em formato digital
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 57 f. : il., grafs., tabs.
application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFPR
instname:Universidade Federal do Paraná (UFPR)
instacron:UFPR
instname_str Universidade Federal do Paraná (UFPR)
instacron_str UFPR
institution UFPR
reponame_str Repositório Institucional da UFPR
collection Repositório Institucional da UFPR
bitstream.url.fl_str_mv https://acervodigital.ufpr.br/bitstream/1884/44969/1/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdf
https://acervodigital.ufpr.br/bitstream/1884/44969/2/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdf.txt
https://acervodigital.ufpr.br/bitstream/1884/44969/3/R%20-%20D%20-%20FLAVIO%20HENRIQUE%20DE%20BITTENCOURT%20ZAVAN.pdf.jpg
bitstream.checksum.fl_str_mv ed03fbc16022d9900f0786b50867cea9
91e4c5e0877136ba8e79d2cf85639c62
1a0fe66df8c93c39ca86bf59bd98c18f
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)
repository.mail.fl_str_mv informacaodigital@ufpr.br
_version_ 1847526109345742848

Registros relacionados