Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.

Detalhes bibliográficos
Ano de defesa: 2018
Autor(a) principal: VIEIRA, Vinícius Jefferson Dias.
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
PÓS-GRADUAÇÃO EM ENGENHARIA ELÉTRICA
UFCG
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/27138
Resumo: Nesta Tese, são estudados os efeitos das variações acústicas não estacionárias provocadas por estados emocionais e condições de estresse em sinais de voz. Ainda não há na literatura um atributo acústico puro para reconhecimento de emoções e estresse. Por meio do índice de não estacionariedade (Index of Non-Stationarity – INS), é observado que diferentes estados afetivos apresentam diferentes graus de não estacionariedade. Como forma de detectar tais variações, é empregada a decomposição empírica de modos (Empirical Mode Decomposition – EMD), que é uma técnica não linear adequada para sinais não estacionários. Com isso, a principal contribuição deste trabalho é a proposta do vetor HHHC (Hilbert-Huang-Hurst Coefficients) como um novo atributo acústico não linear para classificação multiestilo de estados emocionais e condições de estresse. O HHHC é um atributo da fonte de excitação que é baseado em decomposição adaptativa (EMD que enfatiza as variações acústicas afetivas) e estimação dos coeficientes de Hurst (que estão relacionados com a fonte de excitação glotal) em cada um dos modos da decomposição. Outra contribuição é a utilização do INS como informação adicional ao vetor HHHC (HHHC+INS). Para comprovar a robustez do atributo proposto em diferentes línguas e contextos de fala, são analisadas cinco bases de dados, sendo quatro delas no contexto de emoções e uma no contexto de condições de estresse. Como atributos acústicos comparativos ao HHHC, são utilizados o vetor de coeficientes de Hurst (pH), os coeficientes mel-cepstrais (Mel-Frequency Cepstral Coefficients – MFCC) e o atributo baseado no operador TEO (Teager-Energy-Operator). Outra importante contribuição desta Tese é a proposta dos modelos de misturas Gaussianas com integração α (α-integrated Gaussian Mixture Models – α- GMM) para representação e classificação dos estados afetivos. Seu desempenho é comparado com os seguintes métodos clássicos: Modelos de misturas Gaussianas (GMM), Modelos de Markov escondidos (Hidden Markov Models – HMM) e Máquinas de vetor de suporte (Support Vector Machines – SVM). Os resultados obtidos demonstram que o atributo proposto HHHC e sua fusão com o INS promovem taxas de acerto significativas em relação aos atributos comparativos. Além disso, o classificador α-GMM apresenta performance superior às técnicas comparativas em todos os cenários de bases acústicas.
id UCB-2_1a33f8a5dcf58aba6d2c9bf3bfecc5a7
oai_identifier_str oai:localhost:riufcg/27138
network_acronym_str UCB-2
network_name_str Repositório Institucional da UCB
repository_id_str
spelling Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.Analysis of non-stationary acoustic variations and their effect on the detection of multiple emotions and stress conditions.Atributo acústicoDecomposição empírica de modosÍndice de não estacionariedadeReconhecimento de emoçõesAcoustic attributeEmpirical decomposition of modesIndex of no stationarityEmotion recognitionEngenharia ElétricaNesta Tese, são estudados os efeitos das variações acústicas não estacionárias provocadas por estados emocionais e condições de estresse em sinais de voz. Ainda não há na literatura um atributo acústico puro para reconhecimento de emoções e estresse. Por meio do índice de não estacionariedade (Index of Non-Stationarity – INS), é observado que diferentes estados afetivos apresentam diferentes graus de não estacionariedade. Como forma de detectar tais variações, é empregada a decomposição empírica de modos (Empirical Mode Decomposition – EMD), que é uma técnica não linear adequada para sinais não estacionários. Com isso, a principal contribuição deste trabalho é a proposta do vetor HHHC (Hilbert-Huang-Hurst Coefficients) como um novo atributo acústico não linear para classificação multiestilo de estados emocionais e condições de estresse. O HHHC é um atributo da fonte de excitação que é baseado em decomposição adaptativa (EMD que enfatiza as variações acústicas afetivas) e estimação dos coeficientes de Hurst (que estão relacionados com a fonte de excitação glotal) em cada um dos modos da decomposição. Outra contribuição é a utilização do INS como informação adicional ao vetor HHHC (HHHC+INS). Para comprovar a robustez do atributo proposto em diferentes línguas e contextos de fala, são analisadas cinco bases de dados, sendo quatro delas no contexto de emoções e uma no contexto de condições de estresse. Como atributos acústicos comparativos ao HHHC, são utilizados o vetor de coeficientes de Hurst (pH), os coeficientes mel-cepstrais (Mel-Frequency Cepstral Coefficients – MFCC) e o atributo baseado no operador TEO (Teager-Energy-Operator). Outra importante contribuição desta Tese é a proposta dos modelos de misturas Gaussianas com integração α (α-integrated Gaussian Mixture Models – α- GMM) para representação e classificação dos estados afetivos. Seu desempenho é comparado com os seguintes métodos clássicos: Modelos de misturas Gaussianas (GMM), Modelos de Markov escondidos (Hidden Markov Models – HMM) e Máquinas de vetor de suporte (Support Vector Machines – SVM). Os resultados obtidos demonstram que o atributo proposto HHHC e sua fusão com o INS promovem taxas de acerto significativas em relação aos atributos comparativos. Além disso, o classificador α-GMM apresenta performance superior às técnicas comparativas em todos os cenários de bases acústicas.The goal of this work is to study the effects of non-stationary acoustic variations caused by emotional states and stress conditions. In the literature, there is still no pure acoustic attribute for emotion and stress recognition. By using the index of non-stationarity (INS), it is observed that different affective states have different degrees of non-stationarity. As for the detection of such variations, it is employed the empirical mode decomposition (EMD), which is a nonlinear technique that is suitable for non-stationary signals. Thus, the main contribution of this work is the proposal of the HHHC vector (Hilbert-Huang-Hurst Coefficients) as a new non- linear acoustic feature for the multistyle classification of emotional states and stress conditions. The HHHC is a vocal source feature that is based on adaptive decomposition (EMD, which emphasizes affective acoustic variations) and Hurst coefficients estimation (which are related to the glottal source excitation) in each decomposition mode. Another contribution is the use of INS as additional information to the HHHC vector (HHHC+INS). In order to analyze the robustness of the proposed acoustic feature in different languages and speaking contexts, it is considered five databases. Four of them in the context of emotions and one in the context of stress conditions. As baseline acoustic features to comparing with HHHC, it is used the vector of Hurst coefficients (pH), the Mel-Frequency Cepstral Coefficients (MFCC) and TEO (Teager- Energy-Operator)-based feature. Another important contribution of this Thesis is the proposal of α-integrated Gaussian Mixture Models (α-GMM) for the affective states representation and classification. Its performance is compared to competing classifiers: GMM, Hidden Markov Models (HMM) and Support Vector Machines (SVM). Results demonstrate that the proposed HHHC acoustic feature leads to significant classification improvement when compared to the baseline acoustic features. Also, the results show that α-GMM outperforms the competing classification methods in all acoustic databases scenarios.Universidade Federal de Campina GrandeBrasilCentro de Engenharia Elétrica e Informática - CEEIPÓS-GRADUAÇÃO EM ENGENHARIA ELÉTRICAUFCGASSIS, Francisco Marcos de.ASSIS, F. M.ASSIS, FRANCISCO M.DE ASSIS, FRANCISCO M.http://lattes.cnpq.br/2368523362272656COELHO, Rosângela Fernandes.COELHO, R. F.COELHO, R.COELHO, ROSÂNGELA.http://lattes.cnpq.br/2131496810770098KLAUTAU JÚNIOR, Aldebaro Barreto da Rocha.Klautau, Aldebaro.Klautau, A.B.R.Klautau, A.http://lattes.cnpq.br/1596629769697284ALBERT, Bruno Barbosa.ALBERT, B. B.ALBERT, BRUNO BARBOSA.BRUNO, BARBOSA ALBERT.http://lattes.cnpq.br/4530607277273584SANTOS, Wellington Pinheiro dos.SANTOS, W. P.SANTOS, W.SANTOS, WELLINGTON PINHEIRO DOS.http://lattes.cnpq.br/6413917211782026VIEIRA, Vinícius Jefferson Dias.2018-03-022022-09-13T18:11:22Z2022-09-132022-09-13T18:11:22Zinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesishttp://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/27138VIEIRA, Vinícius Jefferson Dias. Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse. 2018. 97 fl. Tese (Doutorado em Engenharia Elétrica), Programa de Pós-Graduação em Engenharia Elétrica, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2018.porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UCBinstname:Universidade Católica de Brasília (UCB)instacron:UCB2022-09-13T18:11:22Zoai:localhost:riufcg/27138Repositório InstitucionalPRIhttps://repositorio.ucb.br/oai/requestsara.ribeiro@ucb.bropendoar:2022-09-13T18:11:22Repositório Institucional da UCB - Universidade Católica de Brasília (UCB)false
dc.title.none.fl_str_mv Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
Analysis of non-stationary acoustic variations and their effect on the detection of multiple emotions and stress conditions.
title Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
spellingShingle Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
VIEIRA, Vinícius Jefferson Dias.
Atributo acústico
Decomposição empírica de modos
Índice de não estacionariedade
Reconhecimento de emoções
Acoustic attribute
Empirical decomposition of modes
Index of no stationarity
Emotion recognition
Engenharia Elétrica
title_short Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
title_full Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
title_fullStr Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
title_full_unstemmed Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
title_sort Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse.
author VIEIRA, Vinícius Jefferson Dias.
author_facet VIEIRA, Vinícius Jefferson Dias.
author_role author
dc.contributor.none.fl_str_mv ASSIS, Francisco Marcos de.
ASSIS, F. M.
ASSIS, FRANCISCO M.
DE ASSIS, FRANCISCO M.
http://lattes.cnpq.br/2368523362272656
COELHO, Rosângela Fernandes.
COELHO, R. F.
COELHO, R.
COELHO, ROSÂNGELA.
http://lattes.cnpq.br/2131496810770098
KLAUTAU JÚNIOR, Aldebaro Barreto da Rocha.
Klautau, Aldebaro.
Klautau, A.B.R.
Klautau, A.
http://lattes.cnpq.br/1596629769697284
ALBERT, Bruno Barbosa.
ALBERT, B. B.
ALBERT, BRUNO BARBOSA.
BRUNO, BARBOSA ALBERT.
http://lattes.cnpq.br/4530607277273584
SANTOS, Wellington Pinheiro dos.
SANTOS, W. P.
SANTOS, W.
SANTOS, WELLINGTON PINHEIRO DOS.
http://lattes.cnpq.br/6413917211782026
dc.contributor.author.fl_str_mv VIEIRA, Vinícius Jefferson Dias.
dc.subject.por.fl_str_mv Atributo acústico
Decomposição empírica de modos
Índice de não estacionariedade
Reconhecimento de emoções
Acoustic attribute
Empirical decomposition of modes
Index of no stationarity
Emotion recognition
Engenharia Elétrica
topic Atributo acústico
Decomposição empírica de modos
Índice de não estacionariedade
Reconhecimento de emoções
Acoustic attribute
Empirical decomposition of modes
Index of no stationarity
Emotion recognition
Engenharia Elétrica
description Nesta Tese, são estudados os efeitos das variações acústicas não estacionárias provocadas por estados emocionais e condições de estresse em sinais de voz. Ainda não há na literatura um atributo acústico puro para reconhecimento de emoções e estresse. Por meio do índice de não estacionariedade (Index of Non-Stationarity – INS), é observado que diferentes estados afetivos apresentam diferentes graus de não estacionariedade. Como forma de detectar tais variações, é empregada a decomposição empírica de modos (Empirical Mode Decomposition – EMD), que é uma técnica não linear adequada para sinais não estacionários. Com isso, a principal contribuição deste trabalho é a proposta do vetor HHHC (Hilbert-Huang-Hurst Coefficients) como um novo atributo acústico não linear para classificação multiestilo de estados emocionais e condições de estresse. O HHHC é um atributo da fonte de excitação que é baseado em decomposição adaptativa (EMD que enfatiza as variações acústicas afetivas) e estimação dos coeficientes de Hurst (que estão relacionados com a fonte de excitação glotal) em cada um dos modos da decomposição. Outra contribuição é a utilização do INS como informação adicional ao vetor HHHC (HHHC+INS). Para comprovar a robustez do atributo proposto em diferentes línguas e contextos de fala, são analisadas cinco bases de dados, sendo quatro delas no contexto de emoções e uma no contexto de condições de estresse. Como atributos acústicos comparativos ao HHHC, são utilizados o vetor de coeficientes de Hurst (pH), os coeficientes mel-cepstrais (Mel-Frequency Cepstral Coefficients – MFCC) e o atributo baseado no operador TEO (Teager-Energy-Operator). Outra importante contribuição desta Tese é a proposta dos modelos de misturas Gaussianas com integração α (α-integrated Gaussian Mixture Models – α- GMM) para representação e classificação dos estados afetivos. Seu desempenho é comparado com os seguintes métodos clássicos: Modelos de misturas Gaussianas (GMM), Modelos de Markov escondidos (Hidden Markov Models – HMM) e Máquinas de vetor de suporte (Support Vector Machines – SVM). Os resultados obtidos demonstram que o atributo proposto HHHC e sua fusão com o INS promovem taxas de acerto significativas em relação aos atributos comparativos. Além disso, o classificador α-GMM apresenta performance superior às técnicas comparativas em todos os cenários de bases acústicas.
publishDate 2018
dc.date.none.fl_str_mv 2018-03-02
2022-09-13T18:11:22Z
2022-09-13
2022-09-13T18:11:22Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/27138
VIEIRA, Vinícius Jefferson Dias. Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse. 2018. 97 fl. Tese (Doutorado em Engenharia Elétrica), Programa de Pós-Graduação em Engenharia Elétrica, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2018.
url http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/27138
identifier_str_mv VIEIRA, Vinícius Jefferson Dias. Análise de variações acústicas não estacionárias e seu efeito na detecção de múltiplas emoções e condições de estresse. 2018. 97 fl. Tese (Doutorado em Engenharia Elétrica), Programa de Pós-Graduação em Engenharia Elétrica, Centro de Engenharia Elétrica e Informática, Universidade Federal de Campina Grande - Paraíba - Brasil, 2018.
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
PÓS-GRADUAÇÃO EM ENGENHARIA ELÉTRICA
UFCG
publisher.none.fl_str_mv Universidade Federal de Campina Grande
Brasil
Centro de Engenharia Elétrica e Informática - CEEI
PÓS-GRADUAÇÃO EM ENGENHARIA ELÉTRICA
UFCG
dc.source.none.fl_str_mv reponame:Repositório Institucional da UCB
instname:Universidade Católica de Brasília (UCB)
instacron:UCB
instname_str Universidade Católica de Brasília (UCB)
instacron_str UCB
institution UCB
reponame_str Repositório Institucional da UCB
collection Repositório Institucional da UCB
repository.name.fl_str_mv Repositório Institucional da UCB - Universidade Católica de Brasília (UCB)
repository.mail.fl_str_mv sara.ribeiro@ucb.br
_version_ 1834013214706237440