Classificação de sinais fisiológicos para inferência do estado emocional de usuários

Detalhes bibliográficos
Ano de defesa: 2019
Autor(a) principal: Souza, Isaque Elcio de
Orientador(a): Neris, Vânia Paula de Almeida lattes
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal de São Carlos
Câmpus São Carlos
Programa de Pós-Graduação: Programa de Pós-Graduação em Ciência da Computação - PPGCC
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Palavras-chave em Inglês:
Área do conhecimento CNPq:
Link de acesso: https://repositorio.ufscar.br/handle/20.500.14289/12293
Resumo: Emotional state plays a fundamental role in explaining human behavior in everyday life, influencing decisions and even how to communicate. Therefore, understanding these characteristics and how to identify them is of the utmost importance for a better understanding of human behavior. Emotions can be classified into two models of taxonomy: Discrete Model that include basic emotions (happiness, sadness, fear, disgust, anger, surprise) and Dimensional Model that expresses two or more emotions in a space, with emotional domains such as Valencia (disgust, pleasure) and Excitement (calm, excitement). The literature presents ways of evaluating emotional cues, with inference in real time, by collecting physiological signals through sensors and classified by algorithms in the emotional domains of Valencia and Excitation. In this context, there is a complexity in collecting this data with low-cost sensors, as well as classifying emotions into more emotional domains, increasing the number of classes and consequently the accuracy of the classification in space. This dissertation aimed to classify physiological signals collected with low cost commercial sensors, inferring dimensional emotions in four domains: Valencia, Excitation, Feeling of control and Ease of conclusion of the objective. Thus, this work presents a dataset, with data from three sensors: cardiac activity (ECG), brain activity (EEG) and galvanic response (GSR). To compose the dataset, the physiological signals were collected from 33 participants in three sessions. In order to bring the individual to a desired emotional state, 16 prelabeled movie clips and video clips were used. After the collection and recording of the signals, a preprocessing step was performed to eliminate noise and inconsistent data and extraction of characteristics. In order to classify, we used the closest K-neighbors algorithms, Naive Bayes, Decision Tree, Random Forest, XGBoost, Support Vector Machine and Artificial Neural Networks. Finally, a statistical evaluation of the performance of the algorithms in each sensor data was performed. The classification algorithms that best fit the characteristics of the data were Naive Bayes for ECG and GSR with 96% and 77% accuracy and Support Vector Machine for EEG with 99% accuracy. The results suggest that the data collected allow classification in the four domains studied.
id SCAR_68eb0bdaa3111a19a89350ac58535738
oai_identifier_str oai:repositorio.ufscar.br:20.500.14289/12293
network_acronym_str SCAR
network_name_str Repositório Institucional da UFSCAR
repository_id_str
spelling Souza, Isaque Elcio deNeris, Vânia Paula de Almeidahttp://lattes.cnpq.br/0268728255033469http://lattes.cnpq.br/84699419725727112020-03-10T11:51:05Z2020-03-10T11:51:05Z2019-02-25SOUZA, Isaque Elcio de. Classificação de sinais fisiológicos para inferência do estado emocional de usuários. 2019. Dissertação (Mestrado em Ciência da Computação) – Universidade Federal de São Carlos, São Carlos, 2019. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/12293.https://repositorio.ufscar.br/handle/20.500.14289/12293Emotional state plays a fundamental role in explaining human behavior in everyday life, influencing decisions and even how to communicate. Therefore, understanding these characteristics and how to identify them is of the utmost importance for a better understanding of human behavior. Emotions can be classified into two models of taxonomy: Discrete Model that include basic emotions (happiness, sadness, fear, disgust, anger, surprise) and Dimensional Model that expresses two or more emotions in a space, with emotional domains such as Valencia (disgust, pleasure) and Excitement (calm, excitement). The literature presents ways of evaluating emotional cues, with inference in real time, by collecting physiological signals through sensors and classified by algorithms in the emotional domains of Valencia and Excitation. In this context, there is a complexity in collecting this data with low-cost sensors, as well as classifying emotions into more emotional domains, increasing the number of classes and consequently the accuracy of the classification in space. This dissertation aimed to classify physiological signals collected with low cost commercial sensors, inferring dimensional emotions in four domains: Valencia, Excitation, Feeling of control and Ease of conclusion of the objective. Thus, this work presents a dataset, with data from three sensors: cardiac activity (ECG), brain activity (EEG) and galvanic response (GSR). To compose the dataset, the physiological signals were collected from 33 participants in three sessions. In order to bring the individual to a desired emotional state, 16 prelabeled movie clips and video clips were used. After the collection and recording of the signals, a preprocessing step was performed to eliminate noise and inconsistent data and extraction of characteristics. In order to classify, we used the closest K-neighbors algorithms, Naive Bayes, Decision Tree, Random Forest, XGBoost, Support Vector Machine and Artificial Neural Networks. Finally, a statistical evaluation of the performance of the algorithms in each sensor data was performed. The classification algorithms that best fit the characteristics of the data were Naive Bayes for ECG and GSR with 96% and 77% accuracy and Support Vector Machine for EEG with 99% accuracy. The results suggest that the data collected allow classification in the four domains studied.O estado emocional tem papel fundamental para explicar o comportamento humano no cotidiano, influenciando em decisões e até mesmo na forma de se comunicar. Portanto, entender tais características e como identificá-las é de extrema importância para conhecer melhor o comportamento humano. As emoções podem ser classificadas em dois modelos de taxonomia: Modelo Discreto, o qual inclui emoções básicas (felicidade, tristeza, medo, repugnância, raiva, surpresa) e o Modelo Dimensional, o qual expressa duas ou mais emoções em um espaço com domínios emocionais, como Valência (nojo, prazer) e Excitação (calma, excitação). A literatura apresenta as maneiras de avaliação de indícios emocionais, com inferência em tempo real, pela coleta de sinais fisiológicos por meio de sensores e classificados por algoritmos nos domínios emocionais de Valência e Excitação. Neste contexto, há uma complexidade em coletar esses dados com sensores de baixo custo, assim como em classificar emoções em mais domínios emocionais, aumentando a quantidade de classes e, consequentemente, a precisão da classificação no espaço. Desse modo, esta dissertação tem por objetivo classificar sinais fisiológicos coletados com sensores comerciais de baixo custo, inferindo emoções dimensionais em quatro domínios: Valência, Excitação, Sentimento de controle e Facilidade de conclusão do objetivo. Assim, este trabalho apresenta um dataset com dados de três sensores: de atividade cardíaca (ECG), atividade cerebral (EEG) e resposta galvânica (GSR). Para compor o dataset, os sinais fisiológicos foram coletados de 33 participantes em três sessões. Com o intuito de levar o indivíduo a um estado emocional desejado, utilizou-se 16 trechos de filmes e videoclipes pré-rotulados. Após a coleta e gravação dos sinais, realizou-se uma etapa de pré-processamento para eliminar ruídos e dados inconsistentes e extração de características. Na sequência, para a classificação, foram utilizados algoritmos K-vizinhos mais próximos, Naive Bayes, Decision Tree, Random Forest, XGBoost, Support Vector Machine e Redes Neurais Artificiais. Por fim, foi realizada uma avaliação estatística do desempenho dos algoritmos em dados de cada sensor. Os algoritmos de classificação que melhor se adaptaram com as características dos dados foram Naive Bayes para ECG e GSR com 96% e 77% acurácia e Support Vector Machine para EEG com 99% de acurácia. Os resultados sugerem que os dados coletados permitem a classificação nos quatro domínios estudados.Conselho Nacional de Desenvolvimento Científico e Tecnológico (CNPq)CNPq: 132895/2016-1porUniversidade Federal de São CarlosCâmpus São CarlosPrograma de Pós-Graduação em Ciência da Computação - PPGCCUFSCarAttribution-NonCommercial-NoDerivs 3.0 Brazilhttp://creativecommons.org/licenses/by-nc-nd/3.0/br/info:eu-repo/semantics/openAccessEmoçãoSensoresInteração humano-computadorAprendizado de máquinaSinal fisiológicoDatasetEmotionSensorsHuman-computer interactionMachine learningPhysiological signalCIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAOClassificação de sinais fisiológicos para inferência do estado emocional de usuáriosClassification of physiological signals to infer the emotional state of usersinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisreponame:Repositório Institucional da UFSCARinstname:Universidade Federal de São Carlos (UFSCAR)instacron:UFSCARORIGINALdissertação_isaque_elcio_de_souza.pdfdissertação_isaque_elcio_de_souza.pdfdissertação mestradoapplication/pdf2142654https://repositorio.ufscar.br/bitstreams/d9ce9a25-e359-4149-8178-5136c416c433/download269b6a1e8986e120846e5384efbe5b43MD51trueAnonymousREADcarta_de_autorização.pdfcarta_de_autorização.pdfCarta de autorizaçãoapplication/pdf168616https://repositorio.ufscar.br/bitstreams/c65b4a29-916c-4945-81a5-76510c2fe7cc/download68f9e44e2fb20cea83fde6b9cdbd8a62MD52falseAnonymousREADCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8811https://repositorio.ufscar.br/bitstreams/afe0d277-21af-4e1e-aa84-830b0a24d939/downloade39d27027a6cc9cb039ad269a5db8e34MD53falseAnonymousREADTEXTdissertação_isaque_elcio_de_souza.pdf.txtdissertação_isaque_elcio_de_souza.pdf.txtExtracted texttext/plain187139https://repositorio.ufscar.br/bitstreams/e245ee71-9f84-4a97-b817-239dda10fded/download148813e6ad0d4f7540de664d05031488MD58falseAnonymousREADcarta_de_autorização.pdf.txtcarta_de_autorização.pdf.txtExtracted texttext/plain1300https://repositorio.ufscar.br/bitstreams/f9489d19-b1ab-48c3-9e3a-205832071d33/download3a18493873b86022346e2e9e448d33b3MD510falseAnonymousREADTHUMBNAILdissertação_isaque_elcio_de_souza.pdf.jpgdissertação_isaque_elcio_de_souza.pdf.jpgIM Thumbnailimage/jpeg6230https://repositorio.ufscar.br/bitstreams/57c857c4-8713-4075-81cc-1c7eb95ee6cb/download6ac0abbaf702c2021dbaef04d1ace7d7MD59falseAnonymousREADcarta_de_autorização.pdf.jpgcarta_de_autorização.pdf.jpgIM Thumbnailimage/jpeg10748https://repositorio.ufscar.br/bitstreams/80499dff-0625-4539-9f2b-620d0a88fc1c/download4f40882dd0e8a259353a04a78f34d881MD511falseAnonymousREAD20.500.14289/122932025-03-27 10:12:23.734http://creativecommons.org/licenses/by-nc-nd/3.0/br/Attribution-NonCommercial-NoDerivs 3.0 Brazilopen.accessoai:repositorio.ufscar.br:20.500.14289/12293https://repositorio.ufscar.brRepositório InstitucionalPUBhttps://repositorio.ufscar.br/oai/requestrepositorio.sibi@ufscar.bropendoar:43222025-03-27T13:12:23Repositório Institucional da UFSCAR - Universidade Federal de São Carlos (UFSCAR)false
dc.title.por.fl_str_mv Classificação de sinais fisiológicos para inferência do estado emocional de usuários
dc.title.alternative.eng.fl_str_mv Classification of physiological signals to infer the emotional state of users
title Classificação de sinais fisiológicos para inferência do estado emocional de usuários
spellingShingle Classificação de sinais fisiológicos para inferência do estado emocional de usuários
Souza, Isaque Elcio de
Emoção
Sensores
Interação humano-computador
Aprendizado de máquina
Sinal fisiológico
Dataset
Emotion
Sensors
Human-computer interaction
Machine learning
Physiological signal
CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
title_short Classificação de sinais fisiológicos para inferência do estado emocional de usuários
title_full Classificação de sinais fisiológicos para inferência do estado emocional de usuários
title_fullStr Classificação de sinais fisiológicos para inferência do estado emocional de usuários
title_full_unstemmed Classificação de sinais fisiológicos para inferência do estado emocional de usuários
title_sort Classificação de sinais fisiológicos para inferência do estado emocional de usuários
author Souza, Isaque Elcio de
author_facet Souza, Isaque Elcio de
author_role author
dc.contributor.authorlattes.por.fl_str_mv http://lattes.cnpq.br/8469941972572711
dc.contributor.author.fl_str_mv Souza, Isaque Elcio de
dc.contributor.advisor1.fl_str_mv Neris, Vânia Paula de Almeida
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/0268728255033469
contributor_str_mv Neris, Vânia Paula de Almeida
dc.subject.por.fl_str_mv Emoção
Sensores
Interação humano-computador
Aprendizado de máquina
Sinal fisiológico
Dataset
topic Emoção
Sensores
Interação humano-computador
Aprendizado de máquina
Sinal fisiológico
Dataset
Emotion
Sensors
Human-computer interaction
Machine learning
Physiological signal
CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
dc.subject.eng.fl_str_mv Emotion
Sensors
Human-computer interaction
Machine learning
Physiological signal
dc.subject.cnpq.fl_str_mv CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO::METODOLOGIA E TECNICAS DA COMPUTACAO
description Emotional state plays a fundamental role in explaining human behavior in everyday life, influencing decisions and even how to communicate. Therefore, understanding these characteristics and how to identify them is of the utmost importance for a better understanding of human behavior. Emotions can be classified into two models of taxonomy: Discrete Model that include basic emotions (happiness, sadness, fear, disgust, anger, surprise) and Dimensional Model that expresses two or more emotions in a space, with emotional domains such as Valencia (disgust, pleasure) and Excitement (calm, excitement). The literature presents ways of evaluating emotional cues, with inference in real time, by collecting physiological signals through sensors and classified by algorithms in the emotional domains of Valencia and Excitation. In this context, there is a complexity in collecting this data with low-cost sensors, as well as classifying emotions into more emotional domains, increasing the number of classes and consequently the accuracy of the classification in space. This dissertation aimed to classify physiological signals collected with low cost commercial sensors, inferring dimensional emotions in four domains: Valencia, Excitation, Feeling of control and Ease of conclusion of the objective. Thus, this work presents a dataset, with data from three sensors: cardiac activity (ECG), brain activity (EEG) and galvanic response (GSR). To compose the dataset, the physiological signals were collected from 33 participants in three sessions. In order to bring the individual to a desired emotional state, 16 prelabeled movie clips and video clips were used. After the collection and recording of the signals, a preprocessing step was performed to eliminate noise and inconsistent data and extraction of characteristics. In order to classify, we used the closest K-neighbors algorithms, Naive Bayes, Decision Tree, Random Forest, XGBoost, Support Vector Machine and Artificial Neural Networks. Finally, a statistical evaluation of the performance of the algorithms in each sensor data was performed. The classification algorithms that best fit the characteristics of the data were Naive Bayes for ECG and GSR with 96% and 77% accuracy and Support Vector Machine for EEG with 99% accuracy. The results suggest that the data collected allow classification in the four domains studied.
publishDate 2019
dc.date.issued.fl_str_mv 2019-02-25
dc.date.accessioned.fl_str_mv 2020-03-10T11:51:05Z
dc.date.available.fl_str_mv 2020-03-10T11:51:05Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv SOUZA, Isaque Elcio de. Classificação de sinais fisiológicos para inferência do estado emocional de usuários. 2019. Dissertação (Mestrado em Ciência da Computação) – Universidade Federal de São Carlos, São Carlos, 2019. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/12293.
dc.identifier.uri.fl_str_mv https://repositorio.ufscar.br/handle/20.500.14289/12293
identifier_str_mv SOUZA, Isaque Elcio de. Classificação de sinais fisiológicos para inferência do estado emocional de usuários. 2019. Dissertação (Mestrado em Ciência da Computação) – Universidade Federal de São Carlos, São Carlos, 2019. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/12293.
url https://repositorio.ufscar.br/handle/20.500.14289/12293
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de São Carlos
Câmpus São Carlos
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Ciência da Computação - PPGCC
dc.publisher.initials.fl_str_mv UFSCar
publisher.none.fl_str_mv Universidade Federal de São Carlos
Câmpus São Carlos
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSCAR
instname:Universidade Federal de São Carlos (UFSCAR)
instacron:UFSCAR
instname_str Universidade Federal de São Carlos (UFSCAR)
instacron_str UFSCAR
institution UFSCAR
reponame_str Repositório Institucional da UFSCAR
collection Repositório Institucional da UFSCAR
bitstream.url.fl_str_mv https://repositorio.ufscar.br/bitstreams/d9ce9a25-e359-4149-8178-5136c416c433/download
https://repositorio.ufscar.br/bitstreams/c65b4a29-916c-4945-81a5-76510c2fe7cc/download
https://repositorio.ufscar.br/bitstreams/afe0d277-21af-4e1e-aa84-830b0a24d939/download
https://repositorio.ufscar.br/bitstreams/e245ee71-9f84-4a97-b817-239dda10fded/download
https://repositorio.ufscar.br/bitstreams/f9489d19-b1ab-48c3-9e3a-205832071d33/download
https://repositorio.ufscar.br/bitstreams/57c857c4-8713-4075-81cc-1c7eb95ee6cb/download
https://repositorio.ufscar.br/bitstreams/80499dff-0625-4539-9f2b-620d0a88fc1c/download
bitstream.checksum.fl_str_mv 269b6a1e8986e120846e5384efbe5b43
68f9e44e2fb20cea83fde6b9cdbd8a62
e39d27027a6cc9cb039ad269a5db8e34
148813e6ad0d4f7540de664d05031488
3a18493873b86022346e2e9e448d33b3
6ac0abbaf702c2021dbaef04d1ace7d7
4f40882dd0e8a259353a04a78f34d881
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFSCAR - Universidade Federal de São Carlos (UFSCAR)
repository.mail.fl_str_mv repositorio.sibi@ufscar.br
_version_ 1851688925685350400