Exportação concluída — 

Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais

Detalhes bibliográficos
Ano de defesa: 2014
Autor(a) principal: Silva Júnior, Juarez Paulino da
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Reconhecimento de padrões
Interface homem-máquina
Sensores de profundidade
Língua de sinais
Link de acesso: http://repositorio.unb.br/handle/10482/16978
Resumo: Dissertação (mestrado)—Universidade de Brasília, Instituto de Ciências Exatas, Departamento de Ciência da Computação, 2014.
id UNB_f197b1e4aedde6f9f989e82d0fb29587
oai_identifier_str oai:repositorio.unb.br:10482/16978
network_acronym_str UNB
network_name_str Repositório Institucional da UnB
repository_id_str
spelling Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinaisReconhecimento de padrõesInterface homem-máquinaSensores de profundidadeLíngua de sinaisDissertação (mestrado)—Universidade de Brasília, Instituto de Ciências Exatas, Departamento de Ciência da Computação, 2014.Gestos são utilizados desde tempos remotos como um mecanismo natural de comunicação.Como elemento de exteriorização da cultura surda, as línguas de sinais (línguas gestuais) possuemum importante papel na formação de uma unidade social. Neste contexto, sistemas dereconhecimento automático das línguas de sinais podem ser valiosos instrumentos de integração,ao passo que atenuam as barreiras impostas e estreitam os laços culturais entre surdos e ouvintes.Recentemente, surgiram novas pesquisas nesta linha que utilizam os chamados sensores RGB-D.Estes sensores caracterizam-se por serem de baixo custo e fácil uso, além de permitirem aaquisição de imagens de profundidade em tempo-real. Por sua vez, estas imagens carregam informaçõesda localização espacial dos objetos da cena, simplificam tarefas de pré-processamentoe contribuem para a proposição de novas metodologias de reconhecimento. Este trabalho propõeum sistema de reconhecimento automático das 26 posturas estáticas representantes das letrasdos alfabetos manuais: da Língua de Sinais Americana (ASL), e da Língua Brasileira de Sinais(Libras). Para alcançar este objetivo, a metodologia do sistema emprega um sensor RGB-D nafase de aquisição de dados; e, de posse das imagens de profundidade, aplica a combinação da estratégia de Casamento de Modelos com o algoritmo de alinhamento Iterative Closest Point(ICP) na fase de reconhecimento. Como contribuição deste trabalho, a técnica ICP é aprimoradade forma a verificar possíveis parâmetros de entrada e saída no alinhamento de instâncias deteste com a base de modelos. Em seguida, utiliza estes parâmetros como determinantes daacurácia e eficiência do reconhecimento. Além disto, a estratégia de Casamento de Modelos é aperfeiçoada de forma a considerar partições de imagens aleatoriamente escolhidas das classes de modelos, visando reduzir o tempo de reconhecimento e aproximando a metodologia aos contextos de tempo-real. Os resultados apresentados mostram que o algoritmo ICP pode ser utilizado para produzir casamentos corretos entre as classes do alfabeto, mesmo quando um conjunto próximo (ambíguo) de posturas gestuais é aplicado. Quanto à acurácia da metodologia implementada, estes resultados indicam um desempenho máximo obtido de 99;04% de taxa de acerto no reconhecimento da ASL e de 99;62% para a Libras. Verificou-se ainda que o sistema atingiu seu melhor desempenho em eficiência com frequência média de processamento de 7;41FPS, utilizando uma máquina de processador único de 2,4 GHz. ________________________________________________________________________________ ABSTRACTGestures are used since ancient times as a natural mechanism of communication. As anelement of externalisation of the deaf culture, sign languages (gestural languages) have animportant role in forming a social unit. In this context, automatic sign language recognitionsystems can be valuable tools of integration, while mitigating the barriers and strengtheningcultural ties between deaf and hearing people. Recently, new research has emerged in this areawhich uses the so called RGB-D sensors. These devices are characterized by the low cost andease of use, also allowing the depth image acquisition in real-time. In turn, these images carryinformation of the spatial location of the objects in the scene, simplify preprocessing tasks andcontribute to propose new recognition methodologies. This work proposes a system for automaticrecognition of the 26 static postures representatives of the letters in the manual alphabets of:the American Sign Language (ASL), and the Brazilian Sign Language (Libras). To achieve thisobjective, the system methodology employs an RGB-D sensor in the phase of data acquisition;and, once in possession of the depth images, applies the combination of the Template Matchingstrategy with the Iterative Closest Point (ICP) alignment algorithm in the recognition phase.As contributions of this work, the ICP technique is improved in order to verify possible inputand output parameters in the alignment of test instances with the model database. Then, it usesthese parameters as accuracy and efficiency determinants of the recognition. Moreover, theTemplate Matching strategy is enhanced to consider image partitions randomly chosen fromthe model classes, aiming time reduction of recognition and approaching the methodology toreal-time contexts. The presented results show that the ICP algorithm can be used to producecorrect matches between the alphabet classes, even when a close (ambiguous) set of sign posturesis applied. Regarding the accuracy of the implemented methodology, these results indicate amaximum performance of 99:04% of success rate in the ASL recognition and of 99:62% forLibras. It was also verified that the system reach its best efficiency performance with an averageprocessing frame frequency of 7:41 FPS, using a 2:4 GHz single processor based machine.Bordim, Jacir LuizSilva Júnior, Juarez Paulino da2014-11-21T12:24:51Z2014-11-21T12:24:51Z2014-11-212014-03-06info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfSILVA JÚNIOR, Juarez Paulino da. Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais. 2014. 82 f., il. Dissertação (Mestrado em Informática)—Universidade de Brasília, Brasília, 2014.http://repositorio.unb.br/handle/10482/16978A concessão da licença deste item refere-se ao termo de autorização impresso assinado pelo autor com as seguintes condições: Na qualidade de titular dos direitos de autor da publicação, autorizo a Universidade de Brasília e o IBICT a disponibilizar por meio dos sites www.bce.unb.br, www.ibict.br, http://hercules.vtls.com/cgi-bin/ndltd/chameleon?lng=pt&skin=ndltd sem ressarcimento dos direitos autorais, de acordo com a Lei nº 9610/98, o texto integral da obra disponibilizada, conforme permissões assinaladas, para fins de leitura, impressão e/ou download, a título de divulgação da produção científica brasileira, a partir desta data.info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da UnBinstname:Universidade de Brasília (UnB)instacron:UNB2023-07-14T18:56:21Zoai:repositorio.unb.br:10482/16978Repositório InstitucionalPUBhttps://repositorio.unb.br/oai/requestrepositorio@unb.bropendoar:2023-07-14T18:56:21Repositório Institucional da UnB - Universidade de Brasília (UnB)false
dc.title.none.fl_str_mv Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
title Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
spellingShingle Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
Silva Júnior, Juarez Paulino da
Reconhecimento de padrões
Interface homem-máquina
Sensores de profundidade
Língua de sinais
title_short Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
title_full Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
title_fullStr Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
title_full_unstemmed Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
title_sort Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais
author Silva Júnior, Juarez Paulino da
author_facet Silva Júnior, Juarez Paulino da
author_role author
dc.contributor.none.fl_str_mv Bordim, Jacir Luiz
dc.contributor.author.fl_str_mv Silva Júnior, Juarez Paulino da
dc.subject.por.fl_str_mv Reconhecimento de padrões
Interface homem-máquina
Sensores de profundidade
Língua de sinais
topic Reconhecimento de padrões
Interface homem-máquina
Sensores de profundidade
Língua de sinais
description Dissertação (mestrado)—Universidade de Brasília, Instituto de Ciências Exatas, Departamento de Ciência da Computação, 2014.
publishDate 2014
dc.date.none.fl_str_mv 2014-11-21T12:24:51Z
2014-11-21T12:24:51Z
2014-11-21
2014-03-06
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv SILVA JÚNIOR, Juarez Paulino da. Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais. 2014. 82 f., il. Dissertação (Mestrado em Informática)—Universidade de Brasília, Brasília, 2014.
http://repositorio.unb.br/handle/10482/16978
identifier_str_mv SILVA JÚNIOR, Juarez Paulino da. Alinhamento de imagens de profundidade com aplicação no reconhecimento da língua de sinais. 2014. 82 f., il. Dissertação (Mestrado em Informática)—Universidade de Brasília, Brasília, 2014.
url http://repositorio.unb.br/handle/10482/16978
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UnB
instname:Universidade de Brasília (UnB)
instacron:UNB
instname_str Universidade de Brasília (UnB)
instacron_str UNB
institution UNB
reponame_str Repositório Institucional da UnB
collection Repositório Institucional da UnB
repository.name.fl_str_mv Repositório Institucional da UnB - Universidade de Brasília (UnB)
repository.mail.fl_str_mv repositorio@unb.br
_version_ 1839083988279361536

Registros relacionados