An investigation of an ASR-based mobile application and its effects on speech intelligibility

Detalhes bibliográficos
Ano de defesa: 2022
Autor(a) principal: Pires, Daniel Reschke
Orientador(a): Tumolo, Celso Henrique Soufen
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Link de acesso: https://repositorio.ufsc.br/handle/123456789/244723
Resumo: Tese (doutorado) - Universidade Federal de Santa Catarina, Centro de Comunicação e Expressão, Programa de Pós-Graduação em Inglês: Estudos Linguísticos e Literários, Florianópolis, 2022.
id UFSC_5445548986620b45892b5690c00a2e99
oai_identifier_str oai:repositorio.ufsc.br:123456789/244723
network_acronym_str UFSC
network_name_str Repositório Institucional da UFSC
repository_id_str
spelling Universidade Federal de Santa CatarinaPires, Daniel ReschkeTumolo, Celso Henrique Soufen2023-02-27T23:10:20Z2023-02-27T23:10:20Z2022380494https://repositorio.ufsc.br/handle/123456789/244723Tese (doutorado) - Universidade Federal de Santa Catarina, Centro de Comunicação e Expressão, Programa de Pós-Graduação em Inglês: Estudos Linguísticos e Literários, Florianópolis, 2022.Existem atualmente diversos aplicativos móveis que utilizam tecnologias de Reconhecimento Automático de Fala (RAF) para fornecer retorno individualizado e imediato à fala de estudantes de segunda língua. Todavia, ainda não se sabe se estes aplicativos podem ajudá-los a se tornarem falantes mais inteligíveis. Este estudo buscou investigar o uso e os efeitos do uso de um aplicativo móvel baseado no RAF na inteligibilidade da fala de aprendizes de inglês. Além disso, o estudo buscou investigar o uso autorregulado do aplicativo e as percepções dos participantes a respeito dele. Os participantes da pesquisa foram 13 estudantes de uma escola pública de educação básica (Colégio de Aplicação ? UFSC), os quais utilizaram o aplicativo ELSA Speak para completar 38 lições cujo foco era a instrução das vogais /i/ e /?/ da língua inglesa. Eles receberam instruções sobre como utilizar o aplicativo, mas puderam escolher quando, onde e como o utilizariam. Para medir a inteligibilidade antes e depois do uso do aplicativo, eles gravaram sentenças curtas contendo palavras-alvo com os sons /i/ e /?/, as quais foram transcritas ortograficamente por 13 ouvintes nativos e não-nativos da língua inglesa. Os resultados dos testes de inteligibilidade revelaram diferenças significativas entre os pré e os pós-teste em termos de inteligibilidade geral e inteligibilidade das palavras-alvo, sendo que os participantes com menor nível inicial de inteligibilidade tiveram os maiores ganhos. Embora os participantes tenham sido instruídos a completar as lições durante o período de um mês, alguns não conseguiram cumprir este prazo e tiveram um uso inconsistente do aplicativo, provavelmente porque não estavam motivados para continuar seu uso. Em geral, os participantes tiveram percepções positivas sobre o aplicativo e acreditam que ele foi capaz de reconhecer sua fala e dar feedback apropriado, embora alguns tenham relatado momentos em que enfrentaram dificuldades para ter sua fala reconhecida. Eles apreciaram a possibilidade de aprender sem se sentirem julgados pelos colegas, e de poderem escolher quando aprender, mas acreditam que a falta de um professor e a falta de organização para utilizar o aplicativo foram as maiores desvantagens envolvidas na sua experiência com a aprendizagem móvel. Este estudo traz implicações relevantes para a instrução de pronúncia em segunda língua à medida que fornece dados empíricos sobre as potencialidades e limitações da instrução de pronúncia baseada em RAF e da aprendizagem de línguas assistida por dispositivos móveis.Abstract: Nowadays, numerous commercially available mobile applications employ Automatic Speech Recognition (ASR) technologies to provide immediate and individualized feedback on the pronunciation of L2 learners. However, it is still unknown whether these applications can help learners become more intelligible speakers. This study investigated the effects of an ASR-based mobile application on the speech intelligibility of Brazilian learners of English. It also sought to investigate the self-regulated use of the application and the participants? perceptions of it. The participants were 13 students from a Brazilian public school, who used an application named ELSA Speak to complete 38 lessons focused on the instruction of the English vowels /i/ and /?/. They received instructions on how they were expected to study with the application, but were allowed to choose when, where and how they used it. To measure their intelligibility before and after the instruction, they recorded short sentences containing /i/ and /?/ target words, which were then orthographically transcribed by native and non-native listeners. The results from the intelligibility tests revealed significant differences between the pre and posttests for overall and target-word intelligibility, with participants with lower levels of intelligibility in the pre-tests having more gains than those with higher levels. Although the participants were asked to complete the lessons in one month, a few of them failed to do so, likely due to a lack of motivation to maintain the use of the application. Overall, the participants had positive perceptions of the application and believed that it was able to recognize their speech and provide appropriate feedback, even though they reported instances in which they struggled to be recognized. They appreciated the possibility of learning without the judgement of others and of choosing when to learn, but believed that the lack of a teacher and their lack of organization were major disadvantages in this type of learning. This study has relevant implications for L2 pronunciation instruction as it provides empirical data on the potentials and limitations of ASR-based instruction and Mobile Assisted Language Learning.184 p.| il., gráfs.engLíngua inglesaAplicativos móveisReconhecimento automático da vozAn investigation of an ASR-based mobile application and its effects on speech intelligibilityinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisreponame:Repositório Institucional da UFSCinstname:Universidade Federal de Santa Catarina (UFSC)instacron:UFSCinfo:eu-repo/semantics/openAccessORIGINALPPGI0221.pdfPPGI0221.pdfapplication/pdf2869714https://repositorio.ufsc.br/bitstream/123456789/244723/1/PPGI0221.pdfd1c400bd7f2b3c2d7e3bed7ea532d41aMD51123456789/2447232023-02-27 20:10:20.192oai:repositorio.ufsc.br:123456789/244723Repositório InstitucionalPUBhttp://150.162.242.35/oai/requestsandra.sobrera@ufsc.bropendoar:23732023-02-27T23:10:20Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)false
dc.title.none.fl_str_mv An investigation of an ASR-based mobile application and its effects on speech intelligibility
title An investigation of an ASR-based mobile application and its effects on speech intelligibility
spellingShingle An investigation of an ASR-based mobile application and its effects on speech intelligibility
Pires, Daniel Reschke
Língua inglesa
Aplicativos móveis
Reconhecimento automático da voz
title_short An investigation of an ASR-based mobile application and its effects on speech intelligibility
title_full An investigation of an ASR-based mobile application and its effects on speech intelligibility
title_fullStr An investigation of an ASR-based mobile application and its effects on speech intelligibility
title_full_unstemmed An investigation of an ASR-based mobile application and its effects on speech intelligibility
title_sort An investigation of an ASR-based mobile application and its effects on speech intelligibility
author Pires, Daniel Reschke
author_facet Pires, Daniel Reschke
author_role author
dc.contributor.none.fl_str_mv Universidade Federal de Santa Catarina
dc.contributor.author.fl_str_mv Pires, Daniel Reschke
dc.contributor.advisor1.fl_str_mv Tumolo, Celso Henrique Soufen
contributor_str_mv Tumolo, Celso Henrique Soufen
dc.subject.classification.none.fl_str_mv Língua inglesa
Aplicativos móveis
Reconhecimento automático da voz
topic Língua inglesa
Aplicativos móveis
Reconhecimento automático da voz
description Tese (doutorado) - Universidade Federal de Santa Catarina, Centro de Comunicação e Expressão, Programa de Pós-Graduação em Inglês: Estudos Linguísticos e Literários, Florianópolis, 2022.
publishDate 2022
dc.date.issued.fl_str_mv 2022
dc.date.accessioned.fl_str_mv 2023-02-27T23:10:20Z
dc.date.available.fl_str_mv 2023-02-27T23:10:20Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://repositorio.ufsc.br/handle/123456789/244723
dc.identifier.other.none.fl_str_mv 380494
identifier_str_mv 380494
url https://repositorio.ufsc.br/handle/123456789/244723
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 184 p.| il., gráfs.
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSC
instname:Universidade Federal de Santa Catarina (UFSC)
instacron:UFSC
instname_str Universidade Federal de Santa Catarina (UFSC)
instacron_str UFSC
institution UFSC
reponame_str Repositório Institucional da UFSC
collection Repositório Institucional da UFSC
bitstream.url.fl_str_mv https://repositorio.ufsc.br/bitstream/123456789/244723/1/PPGI0221.pdf
bitstream.checksum.fl_str_mv d1c400bd7f2b3c2d7e3bed7ea532d41a
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)
repository.mail.fl_str_mv sandra.sobrera@ufsc.br
_version_ 1851759049246244864