Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning

Detalhes bibliográficos
Ano de defesa: 2020
Autor(a) principal: Blanco Rodríguez, Jorge Esteban [UNESP]
Orientador(a): Carvalho, Aparecido Augusto de [UNESP]
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Estadual Paulista (Unesp)
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
CCN
EEG
Palavras-chave em Inglês:
Link de acesso: http://hdl.handle.net/11449/192011
Resumo: Nos últimos anos, com os avanços tecnológicos nas placas gráficas (Graphics Processing Units - GPU’s) e o enorme número de pesquisas nas áreas de Neurociência e Biossinais, as técnicas de Machine Learning (ML) e Deep Learning (DL) tem sido largamente utilizadas nestas áreas. O crescimento da inteligência artificial, a disponibilidade de inmensos repositórios de bancos de dados e a invenção de novos algoritmos de Deep Learning, assim como ferramentas (frameworks), tornaram viável a implementação e a solução de desafios na engenharia, gerando novas tecnologias que possibilitam a conexão de diferentes partes do corpo humano por meio de biossinais, como um canal secundário, sem utilizar as vias neuromusculares. Um exemplo são as conhecidas interfaces cérebro máquina Brain Computer Interface - BCI. Neste trabalho foram implementados dois modelos de DL utilizando TensorFlow e Keras para classificação de sinais de EEG para potenciais visuais evocados. Foram utilizadas duas abordagens com o banco de dados: na primeira utilizou-se o conjunto de dados completo, abrangendo diversos sujeitos e diversas frequências, com o objetivo de ter uma alta inferência dos dados, em um modelo geral. Utilizando o modelo CNN (Convolutional Neural Network ), os sinais de EEG foram classificados com acurácia de 90, 76% e com o modelo Multihead a acurácia foi de 84, 61%. Na segunda abordagem, utilizou-se o conjunto de dados por sujeito e estudou-se o desempenho dos mesmos modelos para cada um dos sujeitos do dataset. Alcançou-se um valor de acurácia mı́nimo de 92, 30% no modelo CNN e de 94, 87% no modelo MultiHead. Os novos modelos apresentam excelentes resultados na classificação de biossinais e podem auxiliar no accionamento de uma BCI.
id UNSP_fc045042b8e3406bca02b67940dbc525
oai_identifier_str oai:repositorio.unesp.br:11449/192011
network_acronym_str UNSP
network_name_str Repositório Institucional da UNESP
repository_id_str
spelling Blanco Rodríguez, Jorge Esteban [UNESP]Universidade Estadual Paulista (Unesp)Carvalho, Aparecido Augusto de [UNESP]2020-03-27T16:12:10Z2020-03-27T16:12:10Z2020-02-05http://hdl.handle.net/11449/19201100092985733004099080P0Nos últimos anos, com os avanços tecnológicos nas placas gráficas (Graphics Processing Units - GPU’s) e o enorme número de pesquisas nas áreas de Neurociência e Biossinais, as técnicas de Machine Learning (ML) e Deep Learning (DL) tem sido largamente utilizadas nestas áreas. O crescimento da inteligência artificial, a disponibilidade de inmensos repositórios de bancos de dados e a invenção de novos algoritmos de Deep Learning, assim como ferramentas (frameworks), tornaram viável a implementação e a solução de desafios na engenharia, gerando novas tecnologias que possibilitam a conexão de diferentes partes do corpo humano por meio de biossinais, como um canal secundário, sem utilizar as vias neuromusculares. Um exemplo são as conhecidas interfaces cérebro máquina Brain Computer Interface - BCI. Neste trabalho foram implementados dois modelos de DL utilizando TensorFlow e Keras para classificação de sinais de EEG para potenciais visuais evocados. Foram utilizadas duas abordagens com o banco de dados: na primeira utilizou-se o conjunto de dados completo, abrangendo diversos sujeitos e diversas frequências, com o objetivo de ter uma alta inferência dos dados, em um modelo geral. Utilizando o modelo CNN (Convolutional Neural Network ), os sinais de EEG foram classificados com acurácia de 90, 76% e com o modelo Multihead a acurácia foi de 84, 61%. Na segunda abordagem, utilizou-se o conjunto de dados por sujeito e estudou-se o desempenho dos mesmos modelos para cada um dos sujeitos do dataset. Alcançou-se um valor de acurácia mı́nimo de 92, 30% no modelo CNN e de 94, 87% no modelo MultiHead. Os novos modelos apresentam excelentes resultados na classificação de biossinais e podem auxiliar no accionamento de uma BCI.In recent years, with the advance of the graphics processing units (GPUs) and the huge number ou neuroscience and biosignals researches, Machine Learning techniques (ML) and Deep Learning (DL) have been widely used in these areas. The expansion of artificial intelligence, the availability of huge database repositories and the invention of a new Deep Learning algorithms, as well as frameworks, have made implementation and solution feasible. Engineering challenges generate new technologies that allow the connection of differents parts of the human body through biosignals, as a secondary channel, without using the neuromuscular pathways. An example is the well know Brain Computer Interface (BCI). In this work, two DL models were implemented using TensorFlow and Keras to classify EEG signals for evoked visual potentials. Two approaches were used with the database: the first employed the complete dataset covering all subjects and all frequancies, in order to have a high data inferences in a general model. Using the CNN (Convolutional Neural Network) model, the EEG signals were classified with 90.76% accuracy and with the MultiHead model the accuracy was 84.61%. In the second approach, we used the dataset by subject and studied the performance of the same models for each of the dataset subjects. Minimum accuracy values of 92, 30% in the CNN model and 94, 87% in the Multihead model were achieved. With this work, two new DL models were stablished, with excellent results in biosignals classification, as can be seen comparing with those presented in several articles in the specialized literature.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)CAPES: 001porUniversidade Estadual Paulista (Unesp)CCNEEGDeep learningTensorflowKerasMachine learningClassificação de sinais de EEG para potenciais visuais evocados utilizando Deep LearningClassification of EEG signals for evoked visual potentials using Deep Learninginfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNESPinstname:Universidade Estadual Paulista (UNESP)instacron:UNESPEngenharia Elétrica - FEISAutomaçãoBiomédicaUniversidade Estadual Paulista (UNESP), Faculdade de Engenharia, Ilha SolteiraOnline0250066159980825[1]0000-0001-8204-3482[1]Banca públicaPublication85b724f4-c5d4-4984-9caf-8f0f0d076a19virtual::173820-185b724f4-c5d4-4984-9caf-8f0f0d076a19virtual::173820-1909f8040-719f-42cf-a550-e298b801fcebvirtual::188526-1909f8040-719f-42cf-a550-e298b801fcebvirtual::188526-1THUMBNAILblanco rodriguez_je_dr_ilha.pdf.jpgWritten by FormatFilter org.dspace.app.mediafilter.PDFBoxThumbnail on 2023-12-25T06:21:38Z (GMT).Generated Thumbnailimage/jpeg3504https://repositorio.unesp.br/bitstreams/7051cc9b-6cc0-4961-a6d3-6854db2a7917/downloadccca920a27bd39df2e2a7b88d60cd302MD55falseAnonymousREADLICENSElicense.txtWritten by org.dspace.content.LicenseUtilstext/plain; charset=utf-83059https://repositorio.unesp.br/bitstreams/f774f545-a7aa-4861-9bc0-9e96d824acbc/download30b88593749ed7d74529dfe25a556a50MD52falseAnonymousREADORIGINALblanco rodriguez_je_dr_ilha.pdfblanco rodriguez_je_dr_ilha.pdfapplication/pdf6665694https://repositorio.unesp.br/bitstreams/a0ebb66e-29d6-4984-9034-6ff7d50938b4/download870ea7791afd01c0474bb1be86e037e7MD53trueAnonymousREADTEXTblanco rodriguez_je_dr_ilha.pdf.txtWritten by FormatFilter org.dspace.app.mediafilter.TikaTextExtractionFilter on 2023-12-25T06:21:38Z (GMT).Extracted texttext/plain103056https://repositorio.unesp.br/bitstreams/9a4727d8-1728-419e-a41d-999cd973c67a/download7017bc03ccb36ec5c2b983cf62434f59MD54falseAnonymousREAD11449/1920112026-01-26T12:51:30.799223Zopen.accessoai:repositorio.unesp.br:11449/192011https://repositorio.unesp.brRepositório InstitucionalPUBhttp://repositorio.unesp.br/oai/requestrepositoriounesp@unesp.bropendoar:29462026-01-26T12:51:30Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)falseTElDRU7Dh0EgUEFSQSBBIERJU1BPTklCSUxJWkHDh8ODTyBPTkxJTkUgREUgRElTU0VSVEHDh8ODTyBPVSBERSBURVNFIFNVQk1FVElEQSBBTyBSRVBPU0lUw5NSSU8gSU5TVElUVUNJT05BTCBVTkVTUA0KDQoxLiBBbyBjb25jb3JkYXIgY29tIGVzdGEgbGljZW7Dp2EsIGV1LCBKb3JnZSBFc3RlYmFuIEJsYW5jbyBSb2RyaWd1ZXogKGpvcmdlLmJsYW5jb0B1bmVzcC5iciksIHJlc3BvbnPDoXZlbCBwZWxvIHRyYWJhbGhvIOKAnENsYXNzaWZpY2HDp8OjbyBkZSBTaW5haXMgZGUgRUVHIFBhcmEgUG90ZW5jaWFpcyBWaXN1YWlzIEV2b2NhZG9zIFV0aWxpemFuZG8gRGVlcCBMZWFybmluZ+KAnSBwb3IgbWltIHN1Ym1ldGlkbyBhbyBSZXBvc2l0w7NyaW8gSW5zdGl0dWNpb25hbCBVTkVTUCBlIGRlc2Vudm9sdmlkbyBubyDDom1iaXRvIGRlIHVtIGRvcyBwcm9ncmFtYXMgZGUgcMOzcy1ncmFkdWHDp8OjbyBkYSBVbml2ZXJzaWRhZGUgRXN0YWR1YWwgUGF1bGlzdGEg4oCcSsO6bGlvIGRlIE1lc3F1aXRhIEZpbGhv4oCdIChVTkVTUCk6DQoNCmEpIGF0ZXN0byBzZXIgbyByZXNwb25zw6F2ZWwgbGVnYWwgcGVsbyB0cmFiYWxobyBzdWJtZXRpZG8gZSBwZWxvcyBkYWRvcyBpbmZvcm1hZG9zIGR1cmFudGUgYSBzdWJtaXNzw6NvOw0KDQpiKSBhdGVzdG8gcXVlIG8gdHJhYmFsaG8gc3VibWV0aWRvIG7Do28gaW5mcmluZ2UgbGVpcyBkZSBkaXJlaXRvIGF1dG9yYWw7DQoNCmMpIGF0ZXN0byBxdWUgbyB0cmFiYWxobyBzdWJtZXRpZG8gbsOjbyBjb250w6ltIHF1YWxxdWVyIGluZm9ybWHDp8OjbyBjb25maWRlbmNpYWwgbWluaGEgb3UgZGUgdGVyY2Vpcm9zOw0KDQpkKSBhdGVzdG8gcXVlLCBzZSBvYnRpdmUgZmluYW5jaWFtZW50byBwYXJhIG8gZGVzZW52b2x2aW1lbnRvIGRvIHRyYWJhbGhvIHN1Ym1ldGlkbywgaW5mb3JtZWkgYSBhZ8OqbmNpYSBkZSBmb21lbnRvIGUgbyBuw7ptZXJvIGRvIGZpbmFuY2lhbWVudG8gZHVyYW50ZSBhIHN1Ym1pc3PDo287DQoNCmUpIGF0ZXN0byBxdWUgYSB2ZXJzw6NvIGRvIHRyYWJhbGhvIHByZXNlbnRlIG5vIGFycXVpdm8gc3VibWV0aWRvIMOpIGEgdmVyc8OjbyBkZWZpbml0aXZhIHF1ZSBpbmNsdWkgYXMgYWx0ZXJhw6fDtWVzIGRlY29ycmVudGVzIGRhIGRlZmVzYSwgc2UgaG91dmUgYWxndW1hOw0KDQpmKSBhdGVzdG8gcXVlIGEgdmVyc8OjbyBkbyB0cmFiYWxobyBwcmVzZW50ZSBubyBhcnF1aXZvIHN1Ym1ldGlkbyBzZXLDoSBhIG1lc21hIHZlcnPDo28gaW1wcmVzc2EgZW50cmVndWUgbmEgU2XDp8OjbyBUw6ljbmljYSBkZSBQw7NzLUdyYWR1YcOnw6NvIGNvbSBhIHF1YWwgbyBwcm9ncmFtYSBkZSBww7NzLWdyYWR1YcOnw6NvIGVtIHF1ZSBvIHRyYWJhbGhvIGZvaSBkZXNlbnZvbHZpZG8gZXN0w6EgdmluY3VsYWRvOw0KDQpnKSBjb25jZWRvIMOgIFVuaXZlcnNpZGFkZSBFc3RhZHVhbCBQYXVsaXN0YSDigJxKw7psaW8gZGUgTWVzcXVpdGEgRmlsaG/igJ0gbyBkaXJlaXRvIG7Do28gZXhjbHVzaXZvIGRlIGRpc3BvbmliaWxpemFyLCBkZSBjb3BpYXIgZSBkZSBkaXN0cmlidWlyLCBwb3IgbWVpbyBkZSBzZXVzIGFtYmllbnRlcyBpbnN0aXR1Y2lvbmFpcyBkZSBhY2Vzc28gcmVzdHJpdG8gb3UgYWJlcnRvIGFvIHDDumJsaWNvIGdlcmFsLCBzZW0gcmVzc2FyY2ltZW50byBkZSBkaXJlaXRvcyBhdXRvcmFpcywgbyB0cmFiYWxobyBzdWJtZXRpZG8gZSBvcyBkYWRvcyBpbmZvcm1hZG9zIGR1cmFudGUgYSBzdWJtaXNzw6NvOw0KDQpoKSBjb25jZWRvIMOgIFVuaXZlcnNpZGFkZSBFc3RhZHVhbCBQYXVsaXN0YSDigJxKw7psaW8gZGUgTWVzcXVpdGEgRmlsaG/igJ0gbyBkaXJlaXRvIG7Do28gZXhjbHVzaXZvIGRlIHJlYWxpemFyIHF1YWlzcXVlciBhbHRlcmHDp8O1ZXMgbmEgbcOtZGlhIG91IG5vIGZvcm1hdG8gZG8gYXJxdWl2byBwYXJhIHByb3DDs3NpdG9zIGRlIHByZXNlcnZhw6fDo28gZGlnaXRhbCwgZGUgYWNlc3NpYmlsaWRhZGUgZSBkZSBtZWxob3IgaWRlbnRpZmljYcOnw6NvIGRvIHRyYWJhbGhvIHN1Ym1ldGlkbywgZGVzZGUgcXVlIG7Do28gc2VqYSBhbHRlcmFkbyBzZXUgY29udGXDumRvIGludGVsZWN0dWFsLg0KDQoyLiBBIFVuaXZlcnNpZGFkZSBFc3RhZHVhbCBQYXVsaXN0YSDigJxKw7psaW8gZGUgTWVzcXVpdGEgRmlsaG/igJ0gc2UgY29tcHJvbWV0ZSBhOg0KDQphKSBmb3JuZWNlciB1bWEgaWRlbnRpZmljYcOnw6NvIGNsYXJhIGRvIG5vbWUgZG8gYXV0b3IgZHVyYW50ZSBhIGRpc3BvbmliaWxpemHDp8OjbywgZW0gYW1iaWVudGUgaW5zdGl0dWNpb25hbCwgZG8gdHJhYmFsaG8gc3VibWV0aWRvOw0KDQpiKSBzZSBuZWNlc3PDoXJpbywgcmVhbGl6YXIgYWx0ZXJhw6fDtWVzIG5vcyBkYWRvcyBpbmZvcm1hZG9zIGR1cmFudGUgYSBzdWJtaXNzw6NvIHBhcmEgcXVlIG1lbGhvciByZXByZXNlbnRlbSBlIGlkZW50aWZpcXVlbSBvIHRyYWJhbGhvIHNlbSwgbm8gZW50YW50bywgY29tcHJvbWV0ZXIgc2V1IGNvbnRlw7pkbyBpbnRlbGVjdHVhbDsNCg0KYykgcmVzcGVpdGFyIGEgZGVjaXPDo28gZG8gYXV0b3Igc29icmUgYSB2ZXJzw6NvIHF1ZSBkZXZlcsOhIHNlciBkaXNwb25pYmlsaXphZGEgaW1lZGlhdGFtZW50ZSBhcMOzcyBvIGFjZWl0ZSBkYSBzdWJtaXNzw6NvLCBzZWphIGVsYSBhIHZlcnPDo28gaW50ZWdyYWwgb3UgcGFyY2lhbDsNCg0KZCkgcmVzcGVpdGFyIG8gcHJhem8gZGVmaW5pZG8gcGVsbyBhdXRvciBwYXJhIGEgZGlzcG9uaWJpbGl6YcOnw6NvIGRvIGNvbnRlw7pkbyBpbnRlZ3JhbCwgY2FzbyBvIGF1dG9yIHRlbmhhIG9wdGFkbyBwZWxhIGRpc3BvbmliaWxpemHDp8OjbyBpbWVkaWF0YSBhcGVuYXMgZG8gY29udGXDumRvIHBhcmNpYWwgZSBvIHByYXpvIGRlZmluaWRvIGVzdGVqYSBkZW50cm8gZGUgMiAoZG9pcykgYW5vcyBhcMOzcyBhIGRlZmVzYTsNCg0KZSkgbsOjbyByZWFsaXphciBhbHRlcmHDp8O1ZXMgbm8gYXJxdWl2byBlbnZpYWRvIGFsw6ltIGRhcXVlbGFzIGRlc2NyaXRhcyBuZXN0YSBsaWNlbsOnYS4NCg0KU8OjbyBQYXVsbywgVGh1IE1hciAyNiAxNzoyODoxOSBCUlQgMjAyMC4=
dc.title.pt.fl_str_mv Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
dc.title.alternative.en.fl_str_mv Classification of EEG signals for evoked visual potentials using Deep Learning
title Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
spellingShingle Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
Blanco Rodríguez, Jorge Esteban [UNESP]
CCN
EEG
Deep learning
Tensorflow
Keras
Machine learning
title_short Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
title_full Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
title_fullStr Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
title_full_unstemmed Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
title_sort Classificação de sinais de EEG para potenciais visuais evocados utilizando Deep Learning
author Blanco Rodríguez, Jorge Esteban [UNESP]
author_facet Blanco Rodríguez, Jorge Esteban [UNESP]
author_role author
dc.contributor.institution.none.fl_str_mv Universidade Estadual Paulista (Unesp)
dc.contributor.author.fl_str_mv Blanco Rodríguez, Jorge Esteban [UNESP]
dc.contributor.advisor1.fl_str_mv Carvalho, Aparecido Augusto de [UNESP]
contributor_str_mv Carvalho, Aparecido Augusto de [UNESP]
dc.subject.por.fl_str_mv CCN
EEG
topic CCN
EEG
Deep learning
Tensorflow
Keras
Machine learning
dc.subject.eng.fl_str_mv Deep learning
Tensorflow
Keras
Machine learning
description Nos últimos anos, com os avanços tecnológicos nas placas gráficas (Graphics Processing Units - GPU’s) e o enorme número de pesquisas nas áreas de Neurociência e Biossinais, as técnicas de Machine Learning (ML) e Deep Learning (DL) tem sido largamente utilizadas nestas áreas. O crescimento da inteligência artificial, a disponibilidade de inmensos repositórios de bancos de dados e a invenção de novos algoritmos de Deep Learning, assim como ferramentas (frameworks), tornaram viável a implementação e a solução de desafios na engenharia, gerando novas tecnologias que possibilitam a conexão de diferentes partes do corpo humano por meio de biossinais, como um canal secundário, sem utilizar as vias neuromusculares. Um exemplo são as conhecidas interfaces cérebro máquina Brain Computer Interface - BCI. Neste trabalho foram implementados dois modelos de DL utilizando TensorFlow e Keras para classificação de sinais de EEG para potenciais visuais evocados. Foram utilizadas duas abordagens com o banco de dados: na primeira utilizou-se o conjunto de dados completo, abrangendo diversos sujeitos e diversas frequências, com o objetivo de ter uma alta inferência dos dados, em um modelo geral. Utilizando o modelo CNN (Convolutional Neural Network ), os sinais de EEG foram classificados com acurácia de 90, 76% e com o modelo Multihead a acurácia foi de 84, 61%. Na segunda abordagem, utilizou-se o conjunto de dados por sujeito e estudou-se o desempenho dos mesmos modelos para cada um dos sujeitos do dataset. Alcançou-se um valor de acurácia mı́nimo de 92, 30% no modelo CNN e de 94, 87% no modelo MultiHead. Os novos modelos apresentam excelentes resultados na classificação de biossinais e podem auxiliar no accionamento de uma BCI.
publishDate 2020
dc.date.accessioned.fl_str_mv 2020-03-27T16:12:10Z
dc.date.available.fl_str_mv 2020-03-27T16:12:10Z
dc.date.issued.fl_str_mv 2020-02-05
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://hdl.handle.net/11449/192011
dc.identifier.aleph.none.fl_str_mv 000929857
dc.identifier.capes.none.fl_str_mv 33004099080P0
url http://hdl.handle.net/11449/192011
identifier_str_mv 000929857
33004099080P0
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
publisher.none.fl_str_mv Universidade Estadual Paulista (Unesp)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNESP
instname:Universidade Estadual Paulista (UNESP)
instacron:UNESP
instname_str Universidade Estadual Paulista (UNESP)
instacron_str UNESP
institution UNESP
reponame_str Repositório Institucional da UNESP
collection Repositório Institucional da UNESP
bitstream.url.fl_str_mv https://repositorio.unesp.br/bitstreams/7051cc9b-6cc0-4961-a6d3-6854db2a7917/download
https://repositorio.unesp.br/bitstreams/f774f545-a7aa-4861-9bc0-9e96d824acbc/download
https://repositorio.unesp.br/bitstreams/a0ebb66e-29d6-4984-9034-6ff7d50938b4/download
https://repositorio.unesp.br/bitstreams/9a4727d8-1728-419e-a41d-999cd973c67a/download
bitstream.checksum.fl_str_mv ccca920a27bd39df2e2a7b88d60cd302
30b88593749ed7d74529dfe25a556a50
870ea7791afd01c0474bb1be86e037e7
7017bc03ccb36ec5c2b983cf62434f59
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UNESP - Universidade Estadual Paulista (UNESP)
repository.mail.fl_str_mv repositoriounesp@unesp.br
_version_ 1878343993173999616