O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D

Detalhes bibliográficos
Ano de defesa: 2017
Autor(a) principal: Silva, Carlos Eduardo Rossi Cubas da [UNESP]
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Estadual Paulista (Unesp)
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Captura de movimentos faciais
Blendshapes
Capture of facial movements
Retargeting
Link de acesso: http://hdl.handle.net/11449/148904
Resumo: Nas últimas décadas, o interesse quanto à captura de movimentos da face humana e à identificação de suas expressões com a finalidade de geração de animações faciais realistas, tem aumentado, tanto na comunidade científica quanto na indústria do entretenimento. A alta acurácia nesse processo é necessária, pois os humanos são treinados para identificar expressões faciais, detectando facilmente pequenas imperfeições na animação de uma face virtual. A animação facial baseada em performance é uma das técnicas utilizadas para gerar animações realistas principalmente em filmes. Com o surgimento de câmeras RGB-D de baixo custo, muitos sistemas de animação facial baseada em performance foram desenvolvidos, compartilhando muitos princípios fundamentais, mas com detalhes de implementação específicos. Estes sistemas consistem de uma fase de rastreamento de movimentos e identificação de expressões faciais seguido de um procedimento de redirecionamento de expressões. Neste sentido, ambientes modulares para a animação facial baseada em performance são extremamente úteis na incorporação de novos algoritmos de rastreamento com características de entrada e saídas padronizadas. Considerando o contexto exposto, o presente trabalho teve como principal objetivo a criação e validação de um ambiente com arquitetura modular para animação facial baseada em performance que utilizou uma câmera RGB-D para a captura dos movimentos faciais de um ator, bem como permitiu a incorporação dos principais algoritmos de rastreamento encontrados na literatura, visando o redirecionamento destes movimentos para uma face virtual humana diferente. As entradas e saídas deste ambiente foram padronizadas pelo uso de blendshapes (mistura de formas).
id UNSP_f0f4d6976eb790a24ba5eac35ef5091a
oai_identifier_str oai:repositorio.unesp.br:11449/148904
network_acronym_str UNSP
network_name_str Repositório Institucional da UNESP
repository_id_str
spelling O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-DThe development of a facial animation system based on performance and the use of a RGB-D cameraCaptura de movimentos faciaisBlendshapesCapture of facial movementsRetargetingNas últimas décadas, o interesse quanto à captura de movimentos da face humana e à identificação de suas expressões com a finalidade de geração de animações faciais realistas, tem aumentado, tanto na comunidade científica quanto na indústria do entretenimento. A alta acurácia nesse processo é necessária, pois os humanos são treinados para identificar expressões faciais, detectando facilmente pequenas imperfeições na animação de uma face virtual. A animação facial baseada em performance é uma das técnicas utilizadas para gerar animações realistas principalmente em filmes. Com o surgimento de câmeras RGB-D de baixo custo, muitos sistemas de animação facial baseada em performance foram desenvolvidos, compartilhando muitos princípios fundamentais, mas com detalhes de implementação específicos. Estes sistemas consistem de uma fase de rastreamento de movimentos e identificação de expressões faciais seguido de um procedimento de redirecionamento de expressões. Neste sentido, ambientes modulares para a animação facial baseada em performance são extremamente úteis na incorporação de novos algoritmos de rastreamento com características de entrada e saídas padronizadas. Considerando o contexto exposto, o presente trabalho teve como principal objetivo a criação e validação de um ambiente com arquitetura modular para animação facial baseada em performance que utilizou uma câmera RGB-D para a captura dos movimentos faciais de um ator, bem como permitiu a incorporação dos principais algoritmos de rastreamento encontrados na literatura, visando o redirecionamento destes movimentos para uma face virtual humana diferente. As entradas e saídas deste ambiente foram padronizadas pelo uso de blendshapes (mistura de formas).In recent decades, interest in capturing human face movements and identifying expressions for the purpose of generating realistic facial animations has increased in both the scientific community and the entertainment industry. The high accuracy in this process is necessary because humans are trained to identify facial expressions, easily detecting small imperfections in the animation of a virtual face. Performance-based facial animation is one of the techniques used to generate realistic animations especially in movies. With the emergence of low-cost RGB-D cameras, many performance-based facial animation systems have been developed, sharing many fundamental principles but with specific implementation details. These systems consist of a phase of tracking movements and identifying facial expressions followed by an expression redirection procedure. In this sense, modular environments for performance-based facial animation are extremely useful in incorporating new tracking algorithms with standardized input and output characteristics. Considering the above context, the main objective of this work was the creation and validation of an environment with modular architecture for performance-based facial animation that used an RGB-D camera to capture the facial movements of an actor as well as allowed the incorporation of the main algorithms found in the literary, aiming the redirection of these movements to a different human virtual face. The inputs and outputs of this environment were standardized by the use of blendshapes.Universidade Estadual Paulista (Unesp)Sementille, Antonio Carlos [UNESP]Universidade Estadual Paulista (Unesp)Silva, Carlos Eduardo Rossi Cubas da [UNESP]2017-03-07T13:42:27Z2017-03-07T13:42:27Z2017-02-02info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttp://hdl.handle.net/11449/14890400088137933004153073P2porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNESPinstname:Universidade Estadual Paulista (UNESP)instacron:UNESP2024-11-05T13:26:14Zoai:repositorio.unesp.br:11449/148904Repositório InstitucionalPUBhttp://repositorio.unesp.br/oai/requestrepositoriounesp@unesp.bropendoar:29462024-11-05T13:26:14Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)false
dc.title.none.fl_str_mv O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
The development of a facial animation system based on performance and the use of a RGB-D camera
title O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
spellingShingle O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
Silva, Carlos Eduardo Rossi Cubas da [UNESP]
Captura de movimentos faciais
Blendshapes
Capture of facial movements
Retargeting
title_short O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
title_full O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
title_fullStr O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
title_full_unstemmed O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
title_sort O desenvolvimento de um sistema de animação facial baseado em performance e no uso de câmera RGB-D
author Silva, Carlos Eduardo Rossi Cubas da [UNESP]
author_facet Silva, Carlos Eduardo Rossi Cubas da [UNESP]
author_role author
dc.contributor.none.fl_str_mv Sementille, Antonio Carlos [UNESP]
Universidade Estadual Paulista (Unesp)
dc.contributor.author.fl_str_mv Silva, Carlos Eduardo Rossi Cubas da [UNESP]
dc.subject.por.fl_str_mv Captura de movimentos faciais
Blendshapes
Capture of facial movements
Retargeting
topic Captura de movimentos faciais
Blendshapes
Capture of facial movements
Retargeting
description Nas últimas décadas, o interesse quanto à captura de movimentos da face humana e à identificação de suas expressões com a finalidade de geração de animações faciais realistas, tem aumentado, tanto na comunidade científica quanto na indústria do entretenimento. A alta acurácia nesse processo é necessária, pois os humanos são treinados para identificar expressões faciais, detectando facilmente pequenas imperfeições na animação de uma face virtual. A animação facial baseada em performance é uma das técnicas utilizadas para gerar animações realistas principalmente em filmes. Com o surgimento de câmeras RGB-D de baixo custo, muitos sistemas de animação facial baseada em performance foram desenvolvidos, compartilhando muitos princípios fundamentais, mas com detalhes de implementação específicos. Estes sistemas consistem de uma fase de rastreamento de movimentos e identificação de expressões faciais seguido de um procedimento de redirecionamento de expressões. Neste sentido, ambientes modulares para a animação facial baseada em performance são extremamente úteis na incorporação de novos algoritmos de rastreamento com características de entrada e saídas padronizadas. Considerando o contexto exposto, o presente trabalho teve como principal objetivo a criação e validação de um ambiente com arquitetura modular para animação facial baseada em performance que utilizou uma câmera RGB-D para a captura dos movimentos faciais de um ator, bem como permitiu a incorporação dos principais algoritmos de rastreamento encontrados na literatura, visando o redirecionamento destes movimentos para uma face virtual humana diferente. As entradas e saídas deste ambiente foram padronizadas pelo uso de blendshapes (mistura de formas).
publishDate 2017
dc.date.none.fl_str_mv 2017-03-07T13:42:27Z
2017-03-07T13:42:27Z
2017-02-02
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/11449/148904
000881379
33004153073P2
url http://hdl.handle.net/11449/148904
identifier_str_mv 000881379
33004153073P2
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNESP
instname:Universidade Estadual Paulista (UNESP)
instacron:UNESP
instname_str Universidade Estadual Paulista (UNESP)
instacron_str UNESP
institution UNESP
reponame_str Repositório Institucional da UNESP
collection Repositório Institucional da UNESP
repository.name.fl_str_mv Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)
repository.mail.fl_str_mv repositoriounesp@unesp.br
_version_ 1854955116351717376

Registros relacionados