Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais

Detalhes bibliográficos
Ano de defesa: 2023
Autor(a) principal: Leonam Rezende Soares de Miranda
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal de Minas Gerais
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://hdl.handle.net/1843/54194
Resumo: In convolutional neural networks, aggregation operations are performed in the convolution, pooling and fully connected dense layers. Promising results have been obtained in recent years when using ordered weighted averaging operators, better known as OWA operators, to aggregate data within convolutional neural networks. There are recent works demonstrating that there is a performance gain when using OWA operators, training their weights, to perform the pooling operation, when compared with the most usual operators (maximum and average). Other studies have shown that OWA operators can be used to learn additional order-based information from the feature maps of a certain layer, and the newly generated information is used to complement or replace the input data for the next layer. The purpose of this dissertation is to analyze and combine the two mentioned ideas. Several tests were done to evaluate the performance change when applying OWA operators to classify images, using the VGG13, Network in Network and AlexNet models and the CIFAR-10 and CIFAR-100 datasets.
id UFMG_695b43e1184c08d78ebd0e59fd8e42cc
oai_identifier_str oai:repositorio.ufmg.br:1843/54194
network_acronym_str UFMG
network_name_str Repositório Institucional da UFMG
repository_id_str
spelling 2023-05-30T19:42:26Z2025-09-08T23:36:05Z2023-05-30T19:42:26Z2023-02-15https://hdl.handle.net/1843/54194In convolutional neural networks, aggregation operations are performed in the convolution, pooling and fully connected dense layers. Promising results have been obtained in recent years when using ordered weighted averaging operators, better known as OWA operators, to aggregate data within convolutional neural networks. There are recent works demonstrating that there is a performance gain when using OWA operators, training their weights, to perform the pooling operation, when compared with the most usual operators (maximum and average). Other studies have shown that OWA operators can be used to learn additional order-based information from the feature maps of a certain layer, and the newly generated information is used to complement or replace the input data for the next layer. The purpose of this dissertation is to analyze and combine the two mentioned ideas. Several tests were done to evaluate the performance change when applying OWA operators to classify images, using the VGG13, Network in Network and AlexNet models and the CIFAR-10 and CIFAR-100 datasets.CNPq - Conselho Nacional de Desenvolvimento Científico e TecnológicoCAPES - Coordenação de Aperfeiçoamento de Pessoal de Nível SuperiorporUniversidade Federal de Minas GeraisRedes neurais convolucionaisOperadores OWAAprendizado profundoFunções de agregaçãoClassificação de imagensEngenharia elétricaRedes neurais convolucionaisAprendizado profundoOtimização multiobjetivoAprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionaisinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisLeonam Rezende Soares de Mirandainfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UFMGinstname:Universidade Federal de Minas Gerais (UFMG)instacron:UFMGhttp://lattes.cnpq.br/4970319190023569Frederico Gadelha Guimarãeshttp://lattes.cnpq.br/2472681535872194Janier Arias GarcíaCristiano Leite de CastroNas redes neurais convolucionais são realizadas operações de agregação nas camadas de convolução, pooling e nas densas completamente conectadas. Resultados promissores foram obtidos nos últimos anos ao utilizar operadores de agregação do tipo media ponderada ordenada, mais conhecidos como operadores OWA, para agregar dados dentro das redes neurais convolucionais. Há trabalhos recentes demonstrando que há um ganho de performance signiőcativo ao utilizar os operadores OWA, treinando os seus pesos, para realizar a operação de pooling, quando comparado com os operadores mais usuais (máximo e médio). Outros estudos demonstraram que os operadores OWA podem ser utilizados para aprender informações a partir do ordenamento dos canais de uma determinada camada, e as informações recém-geradas são usadas para complementar ou substituir os dados de entrada para a camada seguinte. O objetivo desta dissertação é analisar e combinar as duas ideias mencionadas. Vários testes foram feitos para avaliar a mudança de desempenho ao aplicar operadores OWA para classiőcar imagens, usando os modelos VGG13, Network in Network e AlexNet e os conjuntos de dados CIFAR-10 e CIFAR-100.BrasilENG - DEPARTAMENTO DE ENGENHARIA ELÉTRICAPrograma de Pós-Graduação em Engenharia ElétricaUFMGORIGINALDissertacao_Leonam_Miranda_pdfA.pdfapplication/pdf10044815https://repositorio.ufmg.br//bitstreams/1c7ac00d-2633-48aa-933d-b5520180e590/downloadf31a7d4db26200bdeb9bfe67ee8d9986MD51trueAnonymousREADLICENSElicense.txttext/plain2118https://repositorio.ufmg.br//bitstreams/e20912ba-017f-4f0d-a83f-89a0995c7bff/downloadcda590c95a0b51b4d15f60c9642ca272MD52falseAnonymousREAD1843/541942025-09-08 20:36:05.066open.accessoai:repositorio.ufmg.br:1843/54194https://repositorio.ufmg.br/Repositório InstitucionalPUBhttps://repositorio.ufmg.br/oairepositorio@ufmg.bropendoar:2025-09-08T23:36:05Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)falseTElDRU7Dh0EgREUgRElTVFJJQlVJw4fDg08gTsODTy1FWENMVVNJVkEgRE8gUkVQT1NJVMOTUklPIElOU1RJVFVDSU9OQUwgREEgVUZNRwoKQ29tIGEgYXByZXNlbnRhw6fDo28gZGVzdGEgbGljZW7Dp2EsIHZvY8OqIChvIGF1dG9yIChlcykgb3UgbyB0aXR1bGFyIGRvcyBkaXJlaXRvcyBkZSBhdXRvcikgY29uY2VkZSBhbyBSZXBvc2l0w7NyaW8gSW5zdGl0dWNpb25hbCBkYSBVRk1HIChSSS1VRk1HKSBvIGRpcmVpdG8gbsOjbyBleGNsdXNpdm8gZSBpcnJldm9nw6F2ZWwgZGUgcmVwcm9kdXppciBlL291IGRpc3RyaWJ1aXIgYSBzdWEgcHVibGljYcOnw6NvIChpbmNsdWluZG8gbyByZXN1bW8pIHBvciB0b2RvIG8gbXVuZG8gbm8gZm9ybWF0byBpbXByZXNzbyBlIGVsZXRyw7RuaWNvIGUgZW0gcXVhbHF1ZXIgbWVpbywgaW5jbHVpbmRvIG9zIGZvcm1hdG9zIMOhdWRpbyBvdSB2w61kZW8uCgpWb2PDqiBkZWNsYXJhIHF1ZSBjb25oZWNlIGEgcG9sw610aWNhIGRlIGNvcHlyaWdodCBkYSBlZGl0b3JhIGRvIHNldSBkb2N1bWVudG8gZSBxdWUgY29uaGVjZSBlIGFjZWl0YSBhcyBEaXJldHJpemVzIGRvIFJJLVVGTUcuCgpWb2PDqiBjb25jb3JkYSBxdWUgbyBSZXBvc2l0w7NyaW8gSW5zdGl0dWNpb25hbCBkYSBVRk1HIHBvZGUsIHNlbSBhbHRlcmFyIG8gY29udGXDumRvLCB0cmFuc3BvciBhIHN1YSBwdWJsaWNhw6fDo28gcGFyYSBxdWFscXVlciBtZWlvIG91IGZvcm1hdG8gcGFyYSBmaW5zIGRlIHByZXNlcnZhw6fDo28uCgpWb2PDqiB0YW1iw6ltIGNvbmNvcmRhIHF1ZSBvIFJlcG9zaXTDs3JpbyBJbnN0aXR1Y2lvbmFsIGRhIFVGTUcgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRlIHN1YSBwdWJsaWNhw6fDo28gcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLgoKVm9jw6ogZGVjbGFyYSBxdWUgYSBzdWEgcHVibGljYcOnw6NvIMOpIG9yaWdpbmFsIGUgcXVlIHZvY8OqIHRlbSBvIHBvZGVyIGRlIGNvbmNlZGVyIG9zIGRpcmVpdG9zIGNvbnRpZG9zIG5lc3RhIGxpY2Vuw6dhLiBWb2PDqiB0YW1iw6ltIGRlY2xhcmEgcXVlIG8gZGVww7NzaXRvIGRlIHN1YSBwdWJsaWNhw6fDo28gbsOjbywgcXVlIHNlamEgZGUgc2V1IGNvbmhlY2ltZW50bywgaW5mcmluZ2UgZGlyZWl0b3MgYXV0b3JhaXMgZGUgbmluZ3XDqW0uCgpDYXNvIGEgc3VhIHB1YmxpY2HDp8OjbyBjb250ZW5oYSBtYXRlcmlhbCBxdWUgdm9jw6ogbsOjbyBwb3NzdWkgYSB0aXR1bGFyaWRhZGUgZG9zIGRpcmVpdG9zIGF1dG9yYWlzLCB2b2PDqiBkZWNsYXJhIHF1ZSBvYnRldmUgYSBwZXJtaXNzw6NvIGlycmVzdHJpdGEgZG8gZGV0ZW50b3IgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIHBhcmEgY29uY2VkZXIgYW8gUmVwb3NpdMOzcmlvIEluc3RpdHVjaW9uYWwgZGEgVUZNRyBvcyBkaXJlaXRvcyBhcHJlc2VudGFkb3MgbmVzdGEgbGljZW7Dp2EsIGUgcXVlIGVzc2UgbWF0ZXJpYWwgZGUgcHJvcHJpZWRhZGUgZGUgdGVyY2Vpcm9zIGVzdMOhIGNsYXJhbWVudGUgaWRlbnRpZmljYWRvIGUgcmVjb25oZWNpZG8gbm8gdGV4dG8gb3Ugbm8gY29udGXDumRvIGRhIHB1YmxpY2HDp8OjbyBvcmEgZGVwb3NpdGFkYS4KCkNBU08gQSBQVUJMSUNBw4fDg08gT1JBIERFUE9TSVRBREEgVEVOSEEgU0lETyBSRVNVTFRBRE8gREUgVU0gUEFUUk9Dw41OSU8gT1UgQVBPSU8gREUgVU1BIEFHw4pOQ0lBIERFIEZPTUVOVE8gT1UgT1VUUk8gT1JHQU5JU01PLCBWT0PDiiBERUNMQVJBIFFVRSBSRVNQRUlUT1UgVE9ET1MgRSBRVUFJU1FVRVIgRElSRUlUT1MgREUgUkVWSVPDg08gQ09NTyBUQU1Cw4lNIEFTIERFTUFJUyBPQlJJR0HDh8OVRVMgRVhJR0lEQVMgUE9SIENPTlRSQVRPIE9VIEFDT1JETy4KCk8gUmVwb3NpdMOzcmlvIEluc3RpdHVjaW9uYWwgZGEgVUZNRyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBvIHNldSBub21lKHMpIG91IG8ocykgbm9tZXMocykgZG8ocykgZGV0ZW50b3IoZXMpIGRvcyBkaXJlaXRvcyBhdXRvcmFpcyBkYSBwdWJsaWNhw6fDo28sIGUgbsOjbyBmYXLDoSBxdWFscXVlciBhbHRlcmHDp8OjbywgYWzDqW0gZGFxdWVsYXMgY29uY2VkaWRhcyBwb3IgZXN0YSBsaWNlbsOnYS4K
dc.title.none.fl_str_mv Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
title Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
spellingShingle Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
Leonam Rezende Soares de Miranda
Engenharia elétrica
Redes neurais convolucionais
Aprendizado profundo
Otimização multiobjetivo
Redes neurais convolucionais
Operadores OWA
Aprendizado profundo
Funções de agregação
Classificação de imagens
title_short Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
title_full Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
title_fullStr Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
title_full_unstemmed Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
title_sort Aprendizado de operadores de agregação do tipo média ponderada ordenada em redes neurais convolucionais
author Leonam Rezende Soares de Miranda
author_facet Leonam Rezende Soares de Miranda
author_role author
dc.contributor.author.fl_str_mv Leonam Rezende Soares de Miranda
dc.subject.por.fl_str_mv Engenharia elétrica
Redes neurais convolucionais
Aprendizado profundo
Otimização multiobjetivo
topic Engenharia elétrica
Redes neurais convolucionais
Aprendizado profundo
Otimização multiobjetivo
Redes neurais convolucionais
Operadores OWA
Aprendizado profundo
Funções de agregação
Classificação de imagens
dc.subject.other.none.fl_str_mv Redes neurais convolucionais
Operadores OWA
Aprendizado profundo
Funções de agregação
Classificação de imagens
description In convolutional neural networks, aggregation operations are performed in the convolution, pooling and fully connected dense layers. Promising results have been obtained in recent years when using ordered weighted averaging operators, better known as OWA operators, to aggregate data within convolutional neural networks. There are recent works demonstrating that there is a performance gain when using OWA operators, training their weights, to perform the pooling operation, when compared with the most usual operators (maximum and average). Other studies have shown that OWA operators can be used to learn additional order-based information from the feature maps of a certain layer, and the newly generated information is used to complement or replace the input data for the next layer. The purpose of this dissertation is to analyze and combine the two mentioned ideas. Several tests were done to evaluate the performance change when applying OWA operators to classify images, using the VGG13, Network in Network and AlexNet models and the CIFAR-10 and CIFAR-100 datasets.
publishDate 2023
dc.date.accessioned.fl_str_mv 2023-05-30T19:42:26Z
2025-09-08T23:36:05Z
dc.date.available.fl_str_mv 2023-05-30T19:42:26Z
dc.date.issued.fl_str_mv 2023-02-15
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1843/54194
url https://hdl.handle.net/1843/54194
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Minas Gerais
publisher.none.fl_str_mv Universidade Federal de Minas Gerais
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFMG
instname:Universidade Federal de Minas Gerais (UFMG)
instacron:UFMG
instname_str Universidade Federal de Minas Gerais (UFMG)
instacron_str UFMG
institution UFMG
reponame_str Repositório Institucional da UFMG
collection Repositório Institucional da UFMG
bitstream.url.fl_str_mv https://repositorio.ufmg.br//bitstreams/1c7ac00d-2633-48aa-933d-b5520180e590/download
https://repositorio.ufmg.br//bitstreams/e20912ba-017f-4f0d-a83f-89a0995c7bff/download
bitstream.checksum.fl_str_mv f31a7d4db26200bdeb9bfe67ee8d9986
cda590c95a0b51b4d15f60c9642ca272
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFMG - Universidade Federal de Minas Gerais (UFMG)
repository.mail.fl_str_mv repositorio@ufmg.br
_version_ 1862105738299572224