Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão

Detalhes bibliográficos
Ano de defesa: 2015
Autor(a) principal: Silva, Melis Mendes [UNIFESP]
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
dARK ID: ark:/48912/001300001hkn0
Idioma: por
Instituição de defesa: Universidade Federal de São Paulo (UNIFESP)
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://sucupira.capes.gov.br/sucupira/public/consultas/coleta/trabalhoConclusao/viewTrabalhoConclusao.jsf?popup=true&id_trabalho=2108998
https://repositorio.unifesp.br/handle/11600/47320
Resumo: Decision tree induction is one of the most employed methods to extract knowledge from data, as the representation of knowledge is very intuitive and easily understandable by humans. A successful strategy for inducing decision trees, the greedy top-down approach, has been continuously improved by researchers over the years. After recent breakthroughs in the automatic design of machine learning algorithms, was proposed a hyper-heuristic evolutionary algorithm for automatically generating decision-tree induction algorithms, named HEAD-DT. In this work, this approach was expanded, making the fitness function, which previously worked with only one goal in multiobjective function. In this context, it was used two techniques for optimizing multi-objective fitness: a weighted formula and the lexicographical technique. Experiments will be conducted in 20 public data sets to assess the performance of the new version of HEAD-DT, and we compare it to the traditional decision-tree algorithms C4.5, CART in addition to the original version of HEAD- DT algorithm. Results show that the multi-objective version of HEAD-DT is able to generate promising algorithms when compared to both previous version of HEAD-DT, C4.5 and CART regarding predictive accuracy, F-Measure and complexity (number of nodes). Therefore, this work presents the first efforts to transform the HEAD-DT in a multiobjective algorithm, that is, able to guide the process of evolution by two or more goals.
id UFSP_ad93a6c66a4d61c989d5418bd575158e
oai_identifier_str oai:repositorio.unifesp.br:11600/47320
network_acronym_str UFSP
network_name_str Repositório Institucional da UNIFESP
repository_id_str
spelling Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisãomulti-objective optimizingevolutionary algorithmshyper-heuristicsdecision treesotimização multi-objetosalgoritimos evolutivoshíper-heurísticaárvores de decisãoDecision tree induction is one of the most employed methods to extract knowledge from data, as the representation of knowledge is very intuitive and easily understandable by humans. A successful strategy for inducing decision trees, the greedy top-down approach, has been continuously improved by researchers over the years. After recent breakthroughs in the automatic design of machine learning algorithms, was proposed a hyper-heuristic evolutionary algorithm for automatically generating decision-tree induction algorithms, named HEAD-DT. In this work, this approach was expanded, making the fitness function, which previously worked with only one goal in multiobjective function. In this context, it was used two techniques for optimizing multi-objective fitness: a weighted formula and the lexicographical technique. Experiments will be conducted in 20 public data sets to assess the performance of the new version of HEAD-DT, and we compare it to the traditional decision-tree algorithms C4.5, CART in addition to the original version of HEAD- DT algorithm. Results show that the multi-objective version of HEAD-DT is able to generate promising algorithms when compared to both previous version of HEAD-DT, C4.5 and CART regarding predictive accuracy, F-Measure and complexity (number of nodes). Therefore, this work presents the first efforts to transform the HEAD-DT in a multiobjective algorithm, that is, able to guide the process of evolution by two or more goals.Indução de árvores de decisão é um dos métodos mais utilizados para extrair conhecimento a partir dos dados, uma vez que a representação do conhecimento é muito intuitivo e de fácil compreensão por seres humanos. Uma estratégia bem sucedida para a indução de árvores de decisão, a abordagem top-down, tem sido continuamente melhorada ao longo dos anos. Após avanços recentes na automatização de algoritmos de aprendizado de máquina, foi proposto um algoritmo evolutivo de hiper-heurística para a geração automática de algoritmos de indução de árvores de decisão: HEAD-DT. Neste trabalho, essa abordagem foi ampliada, tornando a função de fitness, que antes trabalhava com apenas um objetivo, em multiobjetiva. Neste contexto, será adotada duas técnicas para a otimizar o fitness multiobjetivo: a fórmula ponderada e a lexicográfica. Serão realizados experimentos em 20 conjuntos de dados públicos para avaliar o desempenho da nova versão do HEAD-DT, e compará-lo com os tradicionais algoritmos de árvore de decisão C4.5 e CART, além da versão original do algoritmo HEAD-DT. Os resultados mostram que a versão multiobjetiva do HEAD-DT é capaz de gerar algoritmos promissores quando comparados com C4.5, CART e a versão anterior do HEAD-DT, em relação à acurácia, f-measure e número de nós. Diante disso, este trabalho apresenta os primeiros esforços para transformar o HEAD-DT em um algoritmo multiobjetivo, isto é, capaz de guiar o processo de evolução por meio de dois ou mais objetivos.Dados abertos - Sucupira - Teses e dissertações (2013 a 2016)Universidade Federal de São Paulo (UNIFESP)Basgalupp, Marcio Porto [UNIFESP]Universidade Federal de São Paulo (UNIFESP)Silva, Melis Mendes [UNIFESP]2018-07-30T11:44:15Z2018-07-30T11:44:15Z2015-02-23info:eu-repo/semantics/masterThesisinfo:eu-repo/semantics/publishedVersion73 p.application/pdfhttps://sucupira.capes.gov.br/sucupira/public/consultas/coleta/trabalhoConclusao/viewTrabalhoConclusao.jsf?popup=true&id_trabalho=2108998SILVA, Melis Mendes. Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão. 2015. 73 f. Dissertação (Mestrado) - Instituto de Ciência e Tecnologia, Universidade Federal de São Paulo (UNIFESP), São José dos Campos, 2015.MELIS MENDES SILVA PESSOA.pdfhttps://repositorio.unifesp.br/handle/11600/47320ark:/48912/001300001hkn0porinfo:eu-repo/semantics/openAccessreponame:Repositório Institucional da UNIFESPinstname:Universidade Federal de São Paulo (UNIFESP)instacron:UNIFESP2024-08-09T05:33:49Zoai:repositorio.unifesp.br:11600/47320Repositório InstitucionalPUBhttp://www.repositorio.unifesp.br/oai/requestbiblioteca.csp@unifesp.bropendoar:34652024-08-09T05:33:49Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP)false
dc.title.none.fl_str_mv Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
title Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
spellingShingle Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
Silva, Melis Mendes [UNIFESP]
multi-objective optimizing
evolutionary algorithms
hyper-heuristics
decision trees
otimização multi-objetos
algoritimos evolutivos
híper-heurística
árvores de decisão
title_short Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
title_full Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
title_fullStr Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
title_full_unstemmed Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
title_sort Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão
author Silva, Melis Mendes [UNIFESP]
author_facet Silva, Melis Mendes [UNIFESP]
author_role author
dc.contributor.none.fl_str_mv Basgalupp, Marcio Porto [UNIFESP]
Universidade Federal de São Paulo (UNIFESP)
dc.contributor.author.fl_str_mv Silva, Melis Mendes [UNIFESP]
dc.subject.por.fl_str_mv multi-objective optimizing
evolutionary algorithms
hyper-heuristics
decision trees
otimização multi-objetos
algoritimos evolutivos
híper-heurística
árvores de decisão
topic multi-objective optimizing
evolutionary algorithms
hyper-heuristics
decision trees
otimização multi-objetos
algoritimos evolutivos
híper-heurística
árvores de decisão
description Decision tree induction is one of the most employed methods to extract knowledge from data, as the representation of knowledge is very intuitive and easily understandable by humans. A successful strategy for inducing decision trees, the greedy top-down approach, has been continuously improved by researchers over the years. After recent breakthroughs in the automatic design of machine learning algorithms, was proposed a hyper-heuristic evolutionary algorithm for automatically generating decision-tree induction algorithms, named HEAD-DT. In this work, this approach was expanded, making the fitness function, which previously worked with only one goal in multiobjective function. In this context, it was used two techniques for optimizing multi-objective fitness: a weighted formula and the lexicographical technique. Experiments will be conducted in 20 public data sets to assess the performance of the new version of HEAD-DT, and we compare it to the traditional decision-tree algorithms C4.5, CART in addition to the original version of HEAD- DT algorithm. Results show that the multi-objective version of HEAD-DT is able to generate promising algorithms when compared to both previous version of HEAD-DT, C4.5 and CART regarding predictive accuracy, F-Measure and complexity (number of nodes). Therefore, this work presents the first efforts to transform the HEAD-DT in a multiobjective algorithm, that is, able to guide the process of evolution by two or more goals.
publishDate 2015
dc.date.none.fl_str_mv 2015-02-23
2018-07-30T11:44:15Z
2018-07-30T11:44:15Z
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://sucupira.capes.gov.br/sucupira/public/consultas/coleta/trabalhoConclusao/viewTrabalhoConclusao.jsf?popup=true&id_trabalho=2108998
SILVA, Melis Mendes. Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão. 2015. 73 f. Dissertação (Mestrado) - Instituto de Ciência e Tecnologia, Universidade Federal de São Paulo (UNIFESP), São José dos Campos, 2015.
MELIS MENDES SILVA PESSOA.pdf
https://repositorio.unifesp.br/handle/11600/47320
dc.identifier.dark.fl_str_mv ark:/48912/001300001hkn0
url https://sucupira.capes.gov.br/sucupira/public/consultas/coleta/trabalhoConclusao/viewTrabalhoConclusao.jsf?popup=true&id_trabalho=2108998
https://repositorio.unifesp.br/handle/11600/47320
identifier_str_mv SILVA, Melis Mendes. Uma abordagem multiobjetiva para construção automática de algoritmos de indução de árvores de decisão. 2015. 73 f. Dissertação (Mestrado) - Instituto de Ciência e Tecnologia, Universidade Federal de São Paulo (UNIFESP), São José dos Campos, 2015.
MELIS MENDES SILVA PESSOA.pdf
ark:/48912/001300001hkn0
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 73 p.
application/pdf
dc.publisher.none.fl_str_mv Universidade Federal de São Paulo (UNIFESP)
publisher.none.fl_str_mv Universidade Federal de São Paulo (UNIFESP)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UNIFESP
instname:Universidade Federal de São Paulo (UNIFESP)
instacron:UNIFESP
instname_str Universidade Federal de São Paulo (UNIFESP)
instacron_str UNIFESP
institution UNIFESP
reponame_str Repositório Institucional da UNIFESP
collection Repositório Institucional da UNIFESP
repository.name.fl_str_mv Repositório Institucional da UNIFESP - Universidade Federal de São Paulo (UNIFESP)
repository.mail.fl_str_mv biblioteca.csp@unifesp.br
_version_ 1848497892191371264