Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional
| Ano de defesa: | 2018 |
|---|---|
| Autor(a) principal: |
Sampaio, Gustavo Scalabrini
 |
| Orientador(a): |
Marengoni, Mauricio
|
| Banca de defesa: |
Macedo, Elizeu Coutinho de
,
Lima, Clodoaldo Aparecido de Moraes
|
| Tipo de documento: | Dissertação |
| Tipo de acesso: | Acesso aberto |
| Idioma: | por |
| Instituição de defesa: |
Universidade Presbiteriana Mackenzie
|
| Programa de Pós-Graduação: |
Engenharia Elétrica
|
| Departamento: |
Faculdade de Computação e Informática (FCI)
|
| País: |
Brasil
|
| Palavras-chave em Português: | |
| Área do conhecimento CNPq: | |
| Link de acesso: | http://dspace.mackenzie.br/handle/10899/24473 |
Resumo: | New interaction devices such as touchscreens and virtual reality googles has made human computer interaction more intuitive and natural. This work presents concepts and techniques used for the development of a system that allows users to interact with personal computer in a simple and e cient way through face movements. Computer vision techniques such as segmentation, facial detection and landmarks detection were used, as well as programming and mathematical techniques for the development of this system. It is a natural human-computer interface that uses face, eye and mouth movements to perform control functions such as mouse cursor movement and triggering of clicks and keys. Several tests have shown that the developed system has superior performance compared to similar systems, 100 fps processing performance, throughput of 1:20 bits=s for mouse cursor movements, and 1.15 keystrokes with the face per second, it easy to use, fast learning and it can be used in a large number of applications such as internet browsing, social networking and games. The developed system can be used by people with motor disabilities as an assistive technology, promoting social inclusion, as well as providing greater educational and professional opportunities for this public. |
| id |
UPM_0e9e736e4a6cd7721ea35ac074218d61 |
|---|---|
| oai_identifier_str |
oai:dspace.mackenzie.br:10899/24473 |
| network_acronym_str |
UPM |
| network_name_str |
Biblioteca Digital de Teses e Dissertações do Mackenzie |
| repository_id_str |
|
| spelling |
2018-06-11T18:47:36Z2020-05-28T18:08:53Z2020-05-28T18:08:53Z2018-02-08SAMPAIO, Gustavo Scalabrini. Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional. 2018. 95 f. Dissertação (Engenharia Elétrica) - Universidade Presbiteriana Mackenzie, São Paulo.http://dspace.mackenzie.br/handle/10899/24473New interaction devices such as touchscreens and virtual reality googles has made human computer interaction more intuitive and natural. This work presents concepts and techniques used for the development of a system that allows users to interact with personal computer in a simple and e cient way through face movements. Computer vision techniques such as segmentation, facial detection and landmarks detection were used, as well as programming and mathematical techniques for the development of this system. It is a natural human-computer interface that uses face, eye and mouth movements to perform control functions such as mouse cursor movement and triggering of clicks and keys. Several tests have shown that the developed system has superior performance compared to similar systems, 100 fps processing performance, throughput of 1:20 bits=s for mouse cursor movements, and 1.15 keystrokes with the face per second, it easy to use, fast learning and it can be used in a large number of applications such as internet browsing, social networking and games. The developed system can be used by people with motor disabilities as an assistive technology, promoting social inclusion, as well as providing greater educational and professional opportunities for this public.O desenvolvimento de novas formas de interação com o computador, como telas touchscreen e óculos de realidade virtual, tornaram mais intuitiva e natural a sua utilização. O presente trabalho apresenta conceitos e técnicas utilizados para o desenvolvimento de um sistema que permite aos usuários utilizarem o computador pessoal de maneira simples e eficiente por meio dos movimentos da face. Foram utilizadas técnicas de visão computacional como segmentação, detecção facial e detecção dos pontos da face, bem como técnicas de programação e matemáticas para o desenvolvimento desse sistema. Trata-se de uma interface humano-computador do tipo natural que utiliza os movimentos da face, dos olhos e da boca para executar funções de controle como movimentação do cursor do mouse e acionamento de cliques e teclas. Diversos testes mostraram que o sistema desenvolvido apresentou desempenho superior em relação a sistemas similares, desempenho de processamento de 100 fps, throughput de 1; 20 bits=s para movimentações com o cursor do mouse e 1,15 teclas acionadas pela face por segundo, é de fácil utilização, rápido aprendizado e pode ser utilizado em um grande número de aplicações, como navegação na internet, redes sociais e jogos. O sistema desenvolvido pode ser utilizado por pessoas com deficiências motoras como uma tecnologia assistiva, promovendo a inclusão social, além de proporcionar maiores oportunidades educacionais e profissionais para esse público.Coordenação de Aperfeiçoamento de Pessoal de Nível Superiorapplication/pdfporUniversidade Presbiteriana MackenzieEngenharia ElétricaUPMBrasilFaculdade de Computação e Informática (FCI)interação humano-computadorvisão computacionalrastreamento facialpontos faciaispessoas com deficiênciaCNPQ::CIENCIAS EXATAS E DA TERRACNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAODesenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacionalinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisMarengoni, Mauriciohttp://lattes.cnpq.br/1974791787566027Macedo, Elizeu Coutinho dehttp://lattes.cnpq.br/0683719309513445Lima, Clodoaldo Aparecido de Moraeshttp://lattes.cnpq.br/3017337174053381http://lattes.cnpq.br/6516369977507577Sampaio, Gustavo Scalabrinihttp://tede.mackenzie.br/jspui/retrieve/16720/GUSTAVO%20SCALABRINI%20SAMPAIO.pdf.jpghttp://tede.mackenzie.br/jspui/bitstream/tede/3616/2/GUSTAVO%20SCALABRINI%20SAMPAIO.pdfhuman-computer interactioncomputer visionface trackingface landmarkspeople with disabilitiesinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações do Mackenzieinstname:Universidade Presbiteriana Mackenzie (MACKENZIE)instacron:MACKENZIE10899/244732020-05-28 15:08:53.779Biblioteca Digital de Teses e Dissertaçõeshttp://tede.mackenzie.br/jspui/PRI |
| dc.title.por.fl_str_mv |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| title |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| spellingShingle |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional Sampaio, Gustavo Scalabrini interação humano-computador visão computacional rastreamento facial pontos faciais pessoas com deficiência CNPQ::CIENCIAS EXATAS E DA TERRA CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
| title_short |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| title_full |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| title_fullStr |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| title_full_unstemmed |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| title_sort |
Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional |
| author |
Sampaio, Gustavo Scalabrini |
| author_facet |
Sampaio, Gustavo Scalabrini |
| author_role |
author |
| dc.contributor.advisor1.fl_str_mv |
Marengoni, Mauricio |
| dc.contributor.advisor1Lattes.fl_str_mv |
http://lattes.cnpq.br/1974791787566027 |
| dc.contributor.referee1.fl_str_mv |
Macedo, Elizeu Coutinho de |
| dc.contributor.referee1Lattes.fl_str_mv |
http://lattes.cnpq.br/0683719309513445 |
| dc.contributor.referee2.fl_str_mv |
Lima, Clodoaldo Aparecido de Moraes |
| dc.contributor.referee2Lattes.fl_str_mv |
http://lattes.cnpq.br/3017337174053381 |
| dc.contributor.authorLattes.fl_str_mv |
http://lattes.cnpq.br/6516369977507577 |
| dc.contributor.author.fl_str_mv |
Sampaio, Gustavo Scalabrini |
| contributor_str_mv |
Marengoni, Mauricio Macedo, Elizeu Coutinho de Lima, Clodoaldo Aparecido de Moraes |
| dc.subject.por.fl_str_mv |
interação humano-computador visão computacional rastreamento facial pontos faciais pessoas com deficiência |
| topic |
interação humano-computador visão computacional rastreamento facial pontos faciais pessoas com deficiência CNPQ::CIENCIAS EXATAS E DA TERRA CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
| dc.subject.cnpq.fl_str_mv |
CNPQ::CIENCIAS EXATAS E DA TERRA CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
| description |
New interaction devices such as touchscreens and virtual reality googles has made human computer interaction more intuitive and natural. This work presents concepts and techniques used for the development of a system that allows users to interact with personal computer in a simple and e cient way through face movements. Computer vision techniques such as segmentation, facial detection and landmarks detection were used, as well as programming and mathematical techniques for the development of this system. It is a natural human-computer interface that uses face, eye and mouth movements to perform control functions such as mouse cursor movement and triggering of clicks and keys. Several tests have shown that the developed system has superior performance compared to similar systems, 100 fps processing performance, throughput of 1:20 bits=s for mouse cursor movements, and 1.15 keystrokes with the face per second, it easy to use, fast learning and it can be used in a large number of applications such as internet browsing, social networking and games. The developed system can be used by people with motor disabilities as an assistive technology, promoting social inclusion, as well as providing greater educational and professional opportunities for this public. |
| publishDate |
2018 |
| dc.date.accessioned.fl_str_mv |
2018-06-11T18:47:36Z 2020-05-28T18:08:53Z |
| dc.date.issued.fl_str_mv |
2018-02-08 |
| dc.date.available.fl_str_mv |
2020-05-28T18:08:53Z |
| dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
| dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
| format |
masterThesis |
| status_str |
publishedVersion |
| dc.identifier.citation.fl_str_mv |
SAMPAIO, Gustavo Scalabrini. Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional. 2018. 95 f. Dissertação (Engenharia Elétrica) - Universidade Presbiteriana Mackenzie, São Paulo. |
| dc.identifier.uri.fl_str_mv |
http://dspace.mackenzie.br/handle/10899/24473 |
| identifier_str_mv |
SAMPAIO, Gustavo Scalabrini. Desenvolvimento de uma interface computacional natural para pessoas com deficiência motora baseada em visão computacional. 2018. 95 f. Dissertação (Engenharia Elétrica) - Universidade Presbiteriana Mackenzie, São Paulo. |
| url |
http://dspace.mackenzie.br/handle/10899/24473 |
| dc.language.iso.fl_str_mv |
por |
| language |
por |
| dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
| eu_rights_str_mv |
openAccess |
| dc.format.none.fl_str_mv |
application/pdf |
| dc.publisher.none.fl_str_mv |
Universidade Presbiteriana Mackenzie |
| dc.publisher.program.fl_str_mv |
Engenharia Elétrica |
| dc.publisher.initials.fl_str_mv |
UPM |
| dc.publisher.country.fl_str_mv |
Brasil |
| dc.publisher.department.fl_str_mv |
Faculdade de Computação e Informática (FCI) |
| publisher.none.fl_str_mv |
Universidade Presbiteriana Mackenzie |
| dc.source.none.fl_str_mv |
reponame:Biblioteca Digital de Teses e Dissertações do Mackenzie instname:Universidade Presbiteriana Mackenzie (MACKENZIE) instacron:MACKENZIE |
| instname_str |
Universidade Presbiteriana Mackenzie (MACKENZIE) |
| instacron_str |
MACKENZIE |
| institution |
MACKENZIE |
| reponame_str |
Biblioteca Digital de Teses e Dissertações do Mackenzie |
| collection |
Biblioteca Digital de Teses e Dissertações do Mackenzie |
| repository.name.fl_str_mv |
|
| repository.mail.fl_str_mv |
|
| _version_ |
1757174448662773760 |