Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina

Detalhes bibliográficos
Ano de defesa: 2023
Autor(a) principal: Costa, Luciana Rolim
Outros Autores: http://lattes.cnpq.br/4615526264413836
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal do Amazonas
Faculdade de Tecnologia
Brasil
UFAM
Programa de Pós-graduação em Engenharia Elétrica
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://tede.ufam.edu.br/handle/tede/9816
Resumo: A análise de sinais de música e a extração de informações musicalmente relevantes para construir aplicações musicais fazem parte do campo de pesquisa de recuperação de informação de música (MIR, do inglês music information retrieval ), dentro do qual a tarefa de detecção automática de onsets está inserida. Detectar onsets em sinais de música consiste em detectar os instantes de tempo de início dos eventos musicais contidos no sinal de música e esta tarefa, geralmente, serve de base para construção de aplicações como transcrição automática de música de um ou mais instrumentos musicais, alinhamento de áudio com score, estimação do tempo da música, dentre outros. Nesta dissertação, um sistema de detecção automática de onsets em sinais de música de piano usando aprendizado de máquina é apresentado. No framework proposto, a representação tempo-frequência pitch é utilizada e os classificadores investigados são máquina de vetor de suporte (SVM, do inglês, support vector machine), gradient boosting e rede neural convolucional de uma dimensão (CNN 1D, do inglês, one dimensional convolutional neural network ). Os resultados dos experimentos realizados com as bases de dados BS1 e MAESTRO mostram que, na primeira abordagem, a SVM teve desempenho superior ao gradient boosting enquanto, na segunda abordagem, a métrica sensibilidade foi superior quando as características pitch foram utilizadas invés das características de espectrograma na base BS1.
id UFAM_252560e8ff6c0f16c8ca2c5ccef747df
oai_identifier_str oai:https://tede.ufam.edu.br/handle/:tede/9816
network_acronym_str UFAM
network_name_str Biblioteca Digital de Teses e Dissertações da UFAM
repository_id_str
spelling Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquinaENGENHARIASDetecção de onsetsRepresentação pitchAprendizado de máquinaRecuperação da informação musicalNotas de pianoA análise de sinais de música e a extração de informações musicalmente relevantes para construir aplicações musicais fazem parte do campo de pesquisa de recuperação de informação de música (MIR, do inglês music information retrieval ), dentro do qual a tarefa de detecção automática de onsets está inserida. Detectar onsets em sinais de música consiste em detectar os instantes de tempo de início dos eventos musicais contidos no sinal de música e esta tarefa, geralmente, serve de base para construção de aplicações como transcrição automática de música de um ou mais instrumentos musicais, alinhamento de áudio com score, estimação do tempo da música, dentre outros. Nesta dissertação, um sistema de detecção automática de onsets em sinais de música de piano usando aprendizado de máquina é apresentado. No framework proposto, a representação tempo-frequência pitch é utilizada e os classificadores investigados são máquina de vetor de suporte (SVM, do inglês, support vector machine), gradient boosting e rede neural convolucional de uma dimensão (CNN 1D, do inglês, one dimensional convolutional neural network ). Os resultados dos experimentos realizados com as bases de dados BS1 e MAESTRO mostram que, na primeira abordagem, a SVM teve desempenho superior ao gradient boosting enquanto, na segunda abordagem, a métrica sensibilidade foi superior quando as características pitch foram utilizadas invés das características de espectrograma na base BS1.The analysis of music signals and the extraction of musically meaningful information to build musical applications are part of the research field called music information retrieval (MIR), within which the task of automatic onset detection is inserted. The detection of onsets in musical signals consists in detecting the time instants of the beginning of the musical events contained in the musical signal, and this task, generally, serves as a base for building applications like automatic music transcription of one or more musical instruments, audio-score alignment, time estimation of music, among others. This dissertation presents a system for automatic onset detection in piano music signals using machine learning. In the proposed framework, the time-frequency representation pitch is used and the classifiers investigated are support vector machine (SVM), gradient boosting, and one-dimensional convolutional neural network (1D CNN). The experiments results made with the databases BS1 and MAESTRO show that, in the first approach, the SVM had superior performance compared with gradient boosting, while in the second approach, the sensibility metric was higher when using the pitch features instead of the spectrogram features on the BS1 database.CAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível SuperiorUniversidade Federal do AmazonasFaculdade de TecnologiaBrasilUFAMPrograma de Pós-graduação em Engenharia ElétricaSilva Júnior, Waldir Sabino dahttp://lattes.cnpq.br/2925380715531711Araújo, Gabriel Matoshttp://lattes.cnpq.br/4461794616207452Santos, Eulanda Miranda doshttp://lattes.cnpq.br/3054990742969890Costa, Luciana Rolimhttp://lattes.cnpq.br/46155262644138362023-11-16T18:18:40Z2023-07-03info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfCOSTA, Luciana Rolim. Detecção de onsets em notas de músicas instrumentais de piano utilizando representação pitch e aprendizado de máquina. 2023. 82 f. Dissertação (Mestrado em Engenharia Elétrica) - Faculdade de Tecnologia, Universidade Federal do Amazonas, Manaus (AM), 2023.https://tede.ufam.edu.br/handle/tede/9816porhttps://creativecommons.org/licenses/by-nc-nd/4.0/info:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UFAMinstname:Universidade Federal do Amazonas (UFAM)instacron:UFAM2023-11-17T05:03:47Zoai:https://tede.ufam.edu.br/handle/:tede/9816Biblioteca Digital de Teses e Dissertaçõeshttp://200.129.163.131:8080/PUBhttp://200.129.163.131:8080/oai/requestddbc@ufam.edu.br||ddbc@ufam.edu.bropendoar:65922023-11-17T05:03:47Biblioteca Digital de Teses e Dissertações da UFAM - Universidade Federal do Amazonas (UFAM)false
dc.title.none.fl_str_mv Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
title Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
spellingShingle Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
Costa, Luciana Rolim
ENGENHARIAS
Detecção de onsets
Representação pitch
Aprendizado de máquina
Recuperação da informação musical
Notas de piano
title_short Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
title_full Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
title_fullStr Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
title_full_unstemmed Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
title_sort Detecção de Onsets em notas de músicas instrumentais de piano utilizando representação Pitch e aprendizado de máquina
author Costa, Luciana Rolim
author_facet Costa, Luciana Rolim
http://lattes.cnpq.br/4615526264413836
author_role author
author2 http://lattes.cnpq.br/4615526264413836
author2_role author
dc.contributor.none.fl_str_mv Silva Júnior, Waldir Sabino da
http://lattes.cnpq.br/2925380715531711
Araújo, Gabriel Matos
http://lattes.cnpq.br/4461794616207452
Santos, Eulanda Miranda dos
http://lattes.cnpq.br/3054990742969890
dc.contributor.author.fl_str_mv Costa, Luciana Rolim
http://lattes.cnpq.br/4615526264413836
dc.subject.por.fl_str_mv ENGENHARIAS
Detecção de onsets
Representação pitch
Aprendizado de máquina
Recuperação da informação musical
Notas de piano
topic ENGENHARIAS
Detecção de onsets
Representação pitch
Aprendizado de máquina
Recuperação da informação musical
Notas de piano
description A análise de sinais de música e a extração de informações musicalmente relevantes para construir aplicações musicais fazem parte do campo de pesquisa de recuperação de informação de música (MIR, do inglês music information retrieval ), dentro do qual a tarefa de detecção automática de onsets está inserida. Detectar onsets em sinais de música consiste em detectar os instantes de tempo de início dos eventos musicais contidos no sinal de música e esta tarefa, geralmente, serve de base para construção de aplicações como transcrição automática de música de um ou mais instrumentos musicais, alinhamento de áudio com score, estimação do tempo da música, dentre outros. Nesta dissertação, um sistema de detecção automática de onsets em sinais de música de piano usando aprendizado de máquina é apresentado. No framework proposto, a representação tempo-frequência pitch é utilizada e os classificadores investigados são máquina de vetor de suporte (SVM, do inglês, support vector machine), gradient boosting e rede neural convolucional de uma dimensão (CNN 1D, do inglês, one dimensional convolutional neural network ). Os resultados dos experimentos realizados com as bases de dados BS1 e MAESTRO mostram que, na primeira abordagem, a SVM teve desempenho superior ao gradient boosting enquanto, na segunda abordagem, a métrica sensibilidade foi superior quando as características pitch foram utilizadas invés das características de espectrograma na base BS1.
publishDate 2023
dc.date.none.fl_str_mv 2023-11-16T18:18:40Z
2023-07-03
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv COSTA, Luciana Rolim. Detecção de onsets em notas de músicas instrumentais de piano utilizando representação pitch e aprendizado de máquina. 2023. 82 f. Dissertação (Mestrado em Engenharia Elétrica) - Faculdade de Tecnologia, Universidade Federal do Amazonas, Manaus (AM), 2023.
https://tede.ufam.edu.br/handle/tede/9816
identifier_str_mv COSTA, Luciana Rolim. Detecção de onsets em notas de músicas instrumentais de piano utilizando representação pitch e aprendizado de máquina. 2023. 82 f. Dissertação (Mestrado em Engenharia Elétrica) - Faculdade de Tecnologia, Universidade Federal do Amazonas, Manaus (AM), 2023.
url https://tede.ufam.edu.br/handle/tede/9816
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv https://creativecommons.org/licenses/by-nc-nd/4.0/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv https://creativecommons.org/licenses/by-nc-nd/4.0/
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade Federal do Amazonas
Faculdade de Tecnologia
Brasil
UFAM
Programa de Pós-graduação em Engenharia Elétrica
publisher.none.fl_str_mv Universidade Federal do Amazonas
Faculdade de Tecnologia
Brasil
UFAM
Programa de Pós-graduação em Engenharia Elétrica
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UFAM
instname:Universidade Federal do Amazonas (UFAM)
instacron:UFAM
instname_str Universidade Federal do Amazonas (UFAM)
instacron_str UFAM
institution UFAM
reponame_str Biblioteca Digital de Teses e Dissertações da UFAM
collection Biblioteca Digital de Teses e Dissertações da UFAM
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UFAM - Universidade Federal do Amazonas (UFAM)
repository.mail.fl_str_mv ddbc@ufam.edu.br||ddbc@ufam.edu.br
_version_ 1851781313117290496