Exportação concluída — 

Prancha de comunicação alternativa por imagens empregando predição de palavras

Detalhes bibliográficos
Ano de defesa: 2019
Autor(a) principal: Roth, Valmir
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: http://repositorio.utfpr.edu.br/jspui/handle/1/4808
Resumo: The inability to communicate with others means that people can only prevent and hinder the use of assistive technologies. In order to provide effective means of communication for these people, researchers on Alternative and Augmentative Communication (AAC) field investigate and develop new methods and technologies. Thus, in this research, we aim to develop a pictures-based communication board using word prediction to speed up information selection and minimize the user's effort to communicate effectively. The developed software has 2000 figures focused on the Brazilian culture, runs on computers running Windows 8.1 and higher versions and also smartphones and tablets running Android 7.0 and higher. With exclusive features over other free AAC applications available in Brazil, New Free Communication Board - AMPLISOFT implements a word prediction algorithm developed based on Markov's Hidden Models (Markov's Hidden Models - HMM). It is pointed by the literature as one of the most indicated word prediction techniques. A combination of the HMM word prediction algorithm and the new AAC software provides a unique experience for the user and interlocutors because it was specially designed for disabled Brazilian. For this reason, the new free communication board is flexible as to its form of use and the context in which it is intended to work. It allows different texts to be used as a basis for images prediction. And the selection of user images and expressions can be performed applying row and column scanning technique or with manual navigation. Both options are configurable in the software taking into account the corpus loaded or selected by the interlocutor. After selecting the pictures, the user also has the option of presenting the content in audio mode, thus facilitating communication. The results obtained from the tests performed on the development bench, and also the in vivo tests of the developed board, clearly evidence of the ease of use and efficiency in creating messages that can be externalized in audio form. With this application, Brazilians with severe communication difficulties can be in relation with others in an interactive and intensive way.
id UTFPR-12_d509f9e1c1d96b4c1a80c1a40702d3ad
oai_identifier_str oai:repositorio.utfpr.edu.br:1/4808
network_acronym_str UTFPR-12
network_name_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
repository_id_str
spelling Prancha de comunicação alternativa por imagens empregando predição de palavrasPictures-based alternative communication board using word predictionEquipamentos de autoajuda para pessoas com deficiênciaPessoas com deficiência - Meios de comunicaçãoProcessamento de imagens - Técnicas digitaisInterfaces de usuário (Sistemas de computação)Métodos iterativos (Matemática)Markov, Processos deAlgorítmosProcessamento de linguagem natural (Computação)Software - DesenvolvimentoMétodos de simulaçãoEngenharia biomédicaSelf-help devices for people with disabilitiesPeople with disabilities - Means of communicationImage processing - Digital techniquesUser interfaces (Computer systems)Iterative methods (Mathematics)Markov processesAlgorithmsNatural language processing (Computer science)Computer software - DevelopmentSimulation methodsBiomedical engineeringCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::SISTEMAS DE INFORMACAOEngenharia ElétricaThe inability to communicate with others means that people can only prevent and hinder the use of assistive technologies. In order to provide effective means of communication for these people, researchers on Alternative and Augmentative Communication (AAC) field investigate and develop new methods and technologies. Thus, in this research, we aim to develop a pictures-based communication board using word prediction to speed up information selection and minimize the user's effort to communicate effectively. The developed software has 2000 figures focused on the Brazilian culture, runs on computers running Windows 8.1 and higher versions and also smartphones and tablets running Android 7.0 and higher. With exclusive features over other free AAC applications available in Brazil, New Free Communication Board - AMPLISOFT implements a word prediction algorithm developed based on Markov's Hidden Models (Markov's Hidden Models - HMM). It is pointed by the literature as one of the most indicated word prediction techniques. A combination of the HMM word prediction algorithm and the new AAC software provides a unique experience for the user and interlocutors because it was specially designed for disabled Brazilian. For this reason, the new free communication board is flexible as to its form of use and the context in which it is intended to work. It allows different texts to be used as a basis for images prediction. And the selection of user images and expressions can be performed applying row and column scanning technique or with manual navigation. Both options are configurable in the software taking into account the corpus loaded or selected by the interlocutor. After selecting the pictures, the user also has the option of presenting the content in audio mode, thus facilitating communication. The results obtained from the tests performed on the development bench, and also the in vivo tests of the developed board, clearly evidence of the ease of use and efficiency in creating messages that can be externalized in audio form. With this application, Brazilians with severe communication difficulties can be in relation with others in an interactive and intensive way.A impossibilidade de se comunicar com os outros faz com que as pessoas tenham limitações ou dificuldades só minimizadas com o uso de tecnologias assistivas. Visando proporcionar meios efetivos de comunicação para as pessoas, os pesquisadores da área de Comunicação Alternativa e Ampliada (CAA) estudam e desenvolvem novos métodos e tecnologias. Assim sendo, esta pesquisa tem por objetivo geral desenvolver uma prancha de comunicação por figuras com predição de palavras, a fim de acelerar a seleção de informação e minimizar o esforço do usuário para efetivar a comunicação. O software desenvolvido possui 2000 figuras focadas na cultura brasileira, roda em computadores com Windows 8.1 e versões superiores e também em Smartphones e Tablets com Android 7.0 e versões superiores. Com características singulares em relação aos demais aplicativos gratuitos de CAA disponíveis no Brasil, a Nova Prancha Livre de Comunicação – AMPLISOFT conta com um algoritmo de predição de palavras desenvolvido com base nos Modelos Ocultos de Markov (HMM), o algoritmo (HMM) desenvolvido para uso com nova prancha de comunicação é responsável por filtrar as próximas palavras e gerar uma lista ordenada com base na probabilidade de cada palavra ser selecionada, e realizar a associação das palavras preditas com as figuras do dicionário de figuras. O software da prancha de comunicação exibe as imagens preditas pelo algoritmo distribuindo um total de 12 imagens por prancha, em casos onde são retornados mais de 12 elementos preditos é gerada uma sequencia de pranchas. A associação do algoritmo de predição de palavras HMM ao novo software de CAA propicia ao usuário e ao interlocutor uma experiência única, pois a aplicação foi desenvolvida com foco nas necessidades do usuário deficiente brasileiro. Por este motivo, esta Nova Prancha Livre de Comunicação – AMPLISOFT é flexível quanto à forma de uso e quanto ao contexto em que se deseja trabalhar, tendo em vista que possibilita que sejam utilizados diferentes textos como base para predição das imagens. E a seleção das imagens e expressões pelo usuário pode ser realizada utilizando a técnica de varredura entre linhas e colunas ou com a navegação manual. Ambas as opções são configuráveis no aplicativo, levando em consideração o texto corpus carregado ou selecionado pelo interlocutor. Após a seleção das figuras, o usuário tem também a opção de exteriorizar o conteúdo em forma de áudio, tornando a comunicação mais natural. Os resultados obtidos nos testes de bancada e nos ensaios in vivo com o algoritmo e a Prancha desenvolvida nesta pesquisa, mostram que o uso do algoritmo de predição de palavras associado a predição de figuras diminuí consideravelmente a dificuldade na localização das figuras desejadas para seleção na prancha de comunicação, melhorando a eficiência na criação de mensagens e reduzindo o tempo necessário para localização das figuras. Com ela, brasileiros com necessidades complexas de comunicação podem relacionar-se com outras pessoas de uma forma interativa e intensiva.Universidade Tecnológica Federal do ParanáCuritibaBrasilPrograma de Pós-Graduação em Engenharia Elétrica e Informática IndustrialUTFPRNohama, Percyhttps://orcid.org/0000-0002-8051-8453http://lattes.cnpq.br/5055126579468463Nohama, Percyhttps://orcid.org/0000-0002-8051-8453http://lattes.cnpq.br/5055126579468463Guebert, Mirian Célia Castellainhttp://lattes.cnpq.br/7587002081665911Krüger, Simone Infingardihttp://lattes.cnpq.br/6470728141213192Roth, Valmir2020-03-27T17:03:46Z2020-03-27T17:03:46Z2019-12-13info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfROTH, Valmir. Prancha de comunicação alternativa por imagens empregando predição de palavras. 2019. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2019.http://repositorio.utfpr.edu.br/jspui/handle/1/4808porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))instname:Universidade Tecnológica Federal do Paraná (UTFPR)instacron:UTFPR2020-03-28T06:01:16Zoai:repositorio.utfpr.edu.br:1/4808Repositório InstitucionalPUBhttp://repositorio.utfpr.edu.br:8080/oai/requestriut@utfpr.edu.br || sibi@utfpr.edu.bropendoar:2020-03-28T06:01:16Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)false
dc.title.none.fl_str_mv Prancha de comunicação alternativa por imagens empregando predição de palavras
Pictures-based alternative communication board using word prediction
title Prancha de comunicação alternativa por imagens empregando predição de palavras
spellingShingle Prancha de comunicação alternativa por imagens empregando predição de palavras
Roth, Valmir
Equipamentos de autoajuda para pessoas com deficiência
Pessoas com deficiência - Meios de comunicação
Processamento de imagens - Técnicas digitais
Interfaces de usuário (Sistemas de computação)
Métodos iterativos (Matemática)
Markov, Processos de
Algorítmos
Processamento de linguagem natural (Computação)
Software - Desenvolvimento
Métodos de simulação
Engenharia biomédica
Self-help devices for people with disabilities
People with disabilities - Means of communication
Image processing - Digital techniques
User interfaces (Computer systems)
Iterative methods (Mathematics)
Markov processes
Algorithms
Natural language processing (Computer science)
Computer software - Development
Simulation methods
Biomedical engineering
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::SISTEMAS DE INFORMACAO
Engenharia Elétrica
title_short Prancha de comunicação alternativa por imagens empregando predição de palavras
title_full Prancha de comunicação alternativa por imagens empregando predição de palavras
title_fullStr Prancha de comunicação alternativa por imagens empregando predição de palavras
title_full_unstemmed Prancha de comunicação alternativa por imagens empregando predição de palavras
title_sort Prancha de comunicação alternativa por imagens empregando predição de palavras
author Roth, Valmir
author_facet Roth, Valmir
author_role author
dc.contributor.none.fl_str_mv Nohama, Percy
https://orcid.org/0000-0002-8051-8453
http://lattes.cnpq.br/5055126579468463
Nohama, Percy
https://orcid.org/0000-0002-8051-8453
http://lattes.cnpq.br/5055126579468463
Guebert, Mirian Célia Castellain
http://lattes.cnpq.br/7587002081665911
Krüger, Simone Infingardi
http://lattes.cnpq.br/6470728141213192
dc.contributor.author.fl_str_mv Roth, Valmir
dc.subject.por.fl_str_mv Equipamentos de autoajuda para pessoas com deficiência
Pessoas com deficiência - Meios de comunicação
Processamento de imagens - Técnicas digitais
Interfaces de usuário (Sistemas de computação)
Métodos iterativos (Matemática)
Markov, Processos de
Algorítmos
Processamento de linguagem natural (Computação)
Software - Desenvolvimento
Métodos de simulação
Engenharia biomédica
Self-help devices for people with disabilities
People with disabilities - Means of communication
Image processing - Digital techniques
User interfaces (Computer systems)
Iterative methods (Mathematics)
Markov processes
Algorithms
Natural language processing (Computer science)
Computer software - Development
Simulation methods
Biomedical engineering
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::SISTEMAS DE INFORMACAO
Engenharia Elétrica
topic Equipamentos de autoajuda para pessoas com deficiência
Pessoas com deficiência - Meios de comunicação
Processamento de imagens - Técnicas digitais
Interfaces de usuário (Sistemas de computação)
Métodos iterativos (Matemática)
Markov, Processos de
Algorítmos
Processamento de linguagem natural (Computação)
Software - Desenvolvimento
Métodos de simulação
Engenharia biomédica
Self-help devices for people with disabilities
People with disabilities - Means of communication
Image processing - Digital techniques
User interfaces (Computer systems)
Iterative methods (Mathematics)
Markov processes
Algorithms
Natural language processing (Computer science)
Computer software - Development
Simulation methods
Biomedical engineering
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO::SISTEMAS DE INFORMACAO
Engenharia Elétrica
description The inability to communicate with others means that people can only prevent and hinder the use of assistive technologies. In order to provide effective means of communication for these people, researchers on Alternative and Augmentative Communication (AAC) field investigate and develop new methods and technologies. Thus, in this research, we aim to develop a pictures-based communication board using word prediction to speed up information selection and minimize the user's effort to communicate effectively. The developed software has 2000 figures focused on the Brazilian culture, runs on computers running Windows 8.1 and higher versions and also smartphones and tablets running Android 7.0 and higher. With exclusive features over other free AAC applications available in Brazil, New Free Communication Board - AMPLISOFT implements a word prediction algorithm developed based on Markov's Hidden Models (Markov's Hidden Models - HMM). It is pointed by the literature as one of the most indicated word prediction techniques. A combination of the HMM word prediction algorithm and the new AAC software provides a unique experience for the user and interlocutors because it was specially designed for disabled Brazilian. For this reason, the new free communication board is flexible as to its form of use and the context in which it is intended to work. It allows different texts to be used as a basis for images prediction. And the selection of user images and expressions can be performed applying row and column scanning technique or with manual navigation. Both options are configurable in the software taking into account the corpus loaded or selected by the interlocutor. After selecting the pictures, the user also has the option of presenting the content in audio mode, thus facilitating communication. The results obtained from the tests performed on the development bench, and also the in vivo tests of the developed board, clearly evidence of the ease of use and efficiency in creating messages that can be externalized in audio form. With this application, Brazilians with severe communication difficulties can be in relation with others in an interactive and intensive way.
publishDate 2019
dc.date.none.fl_str_mv 2019-12-13
2020-03-27T17:03:46Z
2020-03-27T17:03:46Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv ROTH, Valmir. Prancha de comunicação alternativa por imagens empregando predição de palavras. 2019. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2019.
http://repositorio.utfpr.edu.br/jspui/handle/1/4808
identifier_str_mv ROTH, Valmir. Prancha de comunicação alternativa por imagens empregando predição de palavras. 2019. Dissertação (Mestrado em Engenharia Elétrica e Informática Industrial) - Universidade Tecnológica Federal do Paraná, Curitiba, 2019.
url http://repositorio.utfpr.edu.br/jspui/handle/1/4808
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
publisher.none.fl_str_mv Universidade Tecnológica Federal do Paraná
Curitiba
Brasil
Programa de Pós-Graduação em Engenharia Elétrica e Informática Industrial
UTFPR
dc.source.none.fl_str_mv reponame:Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
instname:Universidade Tecnológica Federal do Paraná (UTFPR)
instacron:UTFPR
instname_str Universidade Tecnológica Federal do Paraná (UTFPR)
instacron_str UTFPR
institution UTFPR
reponame_str Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
collection Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT))
repository.name.fl_str_mv Repositório Institucional da UTFPR (da Universidade Tecnológica Federal do Paraná (RIUT)) - Universidade Tecnológica Federal do Paraná (UTFPR)
repository.mail.fl_str_mv riut@utfpr.edu.br || sibi@utfpr.edu.br
_version_ 1850498239231426560