Deep visual tracking for fiducial markers: a pilot study in telerehabilitation

Detalhes bibliográficos
Ano de defesa: 2019
Autor(a) principal: Mattioli, Fernando Eduardo Resende
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Universidade Federal de Uberlândia
Brasil
Programa de Pós-graduação em Engenharia Elétrica
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://repositorio.ufu.br/handle/123456789/25306
http://dx.doi.org/10.14393/ufu.te.2019.635
Resumo: In the past few decades, technology evolution has brought many improvements to the field of human rehabilitation. Among these improvements, the delivery of rehabilitation services to users at distant locations - known as telerehabilitation - made it possible to provide patients with home-based therapy, reducing the need for displacement to rehabilitation centers. In addition, the use of virtual and augmented training environments have enabled realistic simulation in the rehabilitation process, enhancing patients’ experience and reducing exposure to real-world risks. Despite these benefits, when used in a distributed context, Augmented Reality technology brings additional challenges to the development process, including the integration of software components provided by heterogeneous sources. Also, the development of robust tracking techniques, less prone to detection errors resulting from network transmission is desired. This particular requirement motivated the development of alternative tracking algorithms, including the use of deep neural networks in visual tracking. When designing these trackers, the major role of network’s topology selection has lead to the investigation of automatic search techniques, including evolutionary computation algorithms. In this context, this work presents as contribution a software architecture model for Augmented Reality, focusing on the reliable integration of independent software components for augmented content streaming. In addition, deep visual trackers for fiducial marker detection were designed and evaluated, outperforming other trackers when processing remotely captured video frames. Finally, the application of an evolutionary algorithm in deep neural networks’ topology selection is discussed, presenting competitive results when compared to state-of-the-art methods.
id UFU_2cc48928eeb5e3cd16e8a7e0fd5444c8
oai_identifier_str oai:repositorio.ufu.br:123456789/25306
network_acronym_str UFU
network_name_str Repositório Institucional da UFU
repository_id_str
spelling Deep visual tracking for fiducial markers: a pilot study in telerehabilitationDeep visual tracking aplicado a marcadores fiduciais: um estudo piloto em telereabilitaçãoComputação evolutivaEvolutionary computingRealidade aumentadaAugmented realityAprendizagem profundaDeep learningEngenharia elétricaCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAOCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::PROCESSAMENTO GRAFICO (GRAPHICS)In the past few decades, technology evolution has brought many improvements to the field of human rehabilitation. Among these improvements, the delivery of rehabilitation services to users at distant locations - known as telerehabilitation - made it possible to provide patients with home-based therapy, reducing the need for displacement to rehabilitation centers. In addition, the use of virtual and augmented training environments have enabled realistic simulation in the rehabilitation process, enhancing patients’ experience and reducing exposure to real-world risks. Despite these benefits, when used in a distributed context, Augmented Reality technology brings additional challenges to the development process, including the integration of software components provided by heterogeneous sources. Also, the development of robust tracking techniques, less prone to detection errors resulting from network transmission is desired. This particular requirement motivated the development of alternative tracking algorithms, including the use of deep neural networks in visual tracking. When designing these trackers, the major role of network’s topology selection has lead to the investigation of automatic search techniques, including evolutionary computation algorithms. In this context, this work presents as contribution a software architecture model for Augmented Reality, focusing on the reliable integration of independent software components for augmented content streaming. In addition, deep visual trackers for fiducial marker detection were designed and evaluated, outperforming other trackers when processing remotely captured video frames. Finally, the application of an evolutionary algorithm in deep neural networks’ topology selection is discussed, presenting competitive results when compared to state-of-the-art methods.Tese (Doutorado)Nas últimas décadas, a evolução tecnológica trouxe grandes avanços para o campo da reabilitação humana. Dentre estes avanços, a disponibilização de serviços de reabilitação para usuários em localidades remotas - conhecida como telereabilitação - tornou possível a realização de tratamento a distância, reduzindo a necessidade de deslocamento aos centros de reabilitação. Além disso, ambientes virtuais e aumentados de treinamento possibilitaram o uso de simulações realísticas no processo de reabilitação, melhorando a experiência dos pacientes e reduzindo sua exposição aos riscos inerentes ao mundo real. Apesar destes benefícios, quando utilizada em um contexto distribuído, a tecnologia de Realidade Aumentada traz novos desafios ao processo de desenvolvimento, incluindo a integração de componentes de software de diferentes provedores. Para estas aplicações, torna-se necessário o desenvolvimento de técnicas de rastreamento mais robustas quanto aos erros de transmissão em rede. Este requisito em particular motivou a experimentação de algoritmos alternativos de rastreamento, incluindo o uso de redes neurais profundas no rastreamento visual. O papel fundamental da topologia das redes no desempenho destes rastreadores demanda a investigação de técnicas de pesquisa automática, incluindo o uso de algoritmos de computação evolutiva para esta finalidade. Neste contexto, este trabalho apresenta como contribuição um modelo de arquitetura de software para Realidade Aumentada, com foco na integração de componentes independentes para transmissão de conteúdo aumentado. Além disso, rastreadores baseados em aprendizagem profunda para detecção de marcadores fiduciais foram projetados, implementados e avaliados, apresentando desempenho superior a outros rastreadores quando aplicados a vídeos capturados por fontes remotas. Finalmente, a aplicação de algoritmos evolutivos na seleção de topologias de redes profundas é discutida, apresentando resultados competitivos quando comparados ao estado da arte.Universidade Federal de UberlândiaBrasilPrograma de Pós-graduação em Engenharia ElétricaCardoso, Alexandrehttp://lattes.cnpq.br/3767009717402045Lamounier Júnior, Edgard Afonsohttp://lattes.cnpq.br/0239619592699303Naves, Eduardo Lázaro Martinshttp://lattes.cnpq.br/5450557733379720Peretta, Igor Santoshttp://lattes.cnpq.br/6826511824160198Soares, Luciano Pereirahttp://lattes.cnpq.br/5252110004117416Pinho, Márcio Sarrogliahttp://lattes.cnpq.br/9183721973235194Mattioli, Fernando Eduardo Resende2019-06-03T14:10:20Z2019-06-03T14:10:20Z2019-05-06info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfMATTIOLI, Fernando Eduardo Resende. Deep visual tracking for fiducial markers: a pilot study in telerehabilitation. 2019. 117 f. Tese (Doutorado em Engenharia Elétrica) - Universidade Federal de Uberlândia, Uberlândia, 2019. DOI http://dx.doi.org/10.14393/ufu.te.2019.635.https://repositorio.ufu.br/handle/123456789/25306http://dx.doi.org/10.14393/ufu.te.2019.635enginfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFUinstname:Universidade Federal de Uberlândia (UFU)instacron:UFU2021-03-10T17:00:20Zoai:repositorio.ufu.br:123456789/25306Repositório InstitucionalONGhttp://repositorio.ufu.br/oai/requestdiinf@dirbi.ufu.bropendoar:2021-03-10T17:00:20Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU)false
dc.title.none.fl_str_mv Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
Deep visual tracking aplicado a marcadores fiduciais: um estudo piloto em telereabilitação
title Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
spellingShingle Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
Mattioli, Fernando Eduardo Resende
Computação evolutiva
Evolutionary computing
Realidade aumentada
Augmented reality
Aprendizagem profunda
Deep learning
Engenharia elétrica
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::PROCESSAMENTO GRAFICO (GRAPHICS)
title_short Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
title_full Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
title_fullStr Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
title_full_unstemmed Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
title_sort Deep visual tracking for fiducial markers: a pilot study in telerehabilitation
author Mattioli, Fernando Eduardo Resende
author_facet Mattioli, Fernando Eduardo Resende
author_role author
dc.contributor.none.fl_str_mv Cardoso, Alexandre
http://lattes.cnpq.br/3767009717402045
Lamounier Júnior, Edgard Afonso
http://lattes.cnpq.br/0239619592699303
Naves, Eduardo Lázaro Martins
http://lattes.cnpq.br/5450557733379720
Peretta, Igor Santos
http://lattes.cnpq.br/6826511824160198
Soares, Luciano Pereira
http://lattes.cnpq.br/5252110004117416
Pinho, Márcio Sarroglia
http://lattes.cnpq.br/9183721973235194
dc.contributor.author.fl_str_mv Mattioli, Fernando Eduardo Resende
dc.subject.por.fl_str_mv Computação evolutiva
Evolutionary computing
Realidade aumentada
Augmented reality
Aprendizagem profunda
Deep learning
Engenharia elétrica
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::PROCESSAMENTO GRAFICO (GRAPHICS)
topic Computação evolutiva
Evolutionary computing
Realidade aumentada
Augmented reality
Aprendizagem profunda
Deep learning
Engenharia elétrica
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::PROCESSAMENTO GRAFICO (GRAPHICS)
description In the past few decades, technology evolution has brought many improvements to the field of human rehabilitation. Among these improvements, the delivery of rehabilitation services to users at distant locations - known as telerehabilitation - made it possible to provide patients with home-based therapy, reducing the need for displacement to rehabilitation centers. In addition, the use of virtual and augmented training environments have enabled realistic simulation in the rehabilitation process, enhancing patients’ experience and reducing exposure to real-world risks. Despite these benefits, when used in a distributed context, Augmented Reality technology brings additional challenges to the development process, including the integration of software components provided by heterogeneous sources. Also, the development of robust tracking techniques, less prone to detection errors resulting from network transmission is desired. This particular requirement motivated the development of alternative tracking algorithms, including the use of deep neural networks in visual tracking. When designing these trackers, the major role of network’s topology selection has lead to the investigation of automatic search techniques, including evolutionary computation algorithms. In this context, this work presents as contribution a software architecture model for Augmented Reality, focusing on the reliable integration of independent software components for augmented content streaming. In addition, deep visual trackers for fiducial marker detection were designed and evaluated, outperforming other trackers when processing remotely captured video frames. Finally, the application of an evolutionary algorithm in deep neural networks’ topology selection is discussed, presenting competitive results when compared to state-of-the-art methods.
publishDate 2019
dc.date.none.fl_str_mv 2019-06-03T14:10:20Z
2019-06-03T14:10:20Z
2019-05-06
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv MATTIOLI, Fernando Eduardo Resende. Deep visual tracking for fiducial markers: a pilot study in telerehabilitation. 2019. 117 f. Tese (Doutorado em Engenharia Elétrica) - Universidade Federal de Uberlândia, Uberlândia, 2019. DOI http://dx.doi.org/10.14393/ufu.te.2019.635.
https://repositorio.ufu.br/handle/123456789/25306
http://dx.doi.org/10.14393/ufu.te.2019.635
identifier_str_mv MATTIOLI, Fernando Eduardo Resende. Deep visual tracking for fiducial markers: a pilot study in telerehabilitation. 2019. 117 f. Tese (Doutorado em Engenharia Elétrica) - Universidade Federal de Uberlândia, Uberlândia, 2019. DOI http://dx.doi.org/10.14393/ufu.te.2019.635.
url https://repositorio.ufu.br/handle/123456789/25306
http://dx.doi.org/10.14393/ufu.te.2019.635
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal de Uberlândia
Brasil
Programa de Pós-graduação em Engenharia Elétrica
publisher.none.fl_str_mv Universidade Federal de Uberlândia
Brasil
Programa de Pós-graduação em Engenharia Elétrica
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFU
instname:Universidade Federal de Uberlândia (UFU)
instacron:UFU
instname_str Universidade Federal de Uberlândia (UFU)
instacron_str UFU
institution UFU
reponame_str Repositório Institucional da UFU
collection Repositório Institucional da UFU
repository.name.fl_str_mv Repositório Institucional da UFU - Universidade Federal de Uberlândia (UFU)
repository.mail.fl_str_mv diinf@dirbi.ufu.br
_version_ 1827843521205239808