Exportação concluída — 

Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede

Detalhes bibliográficos
Ano de defesa: 2015
Autor(a) principal: Hoss, Diego Jonathan
Orientador(a): Hara, Carmem Satie, 1964-
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Ciência da computação
Metadados
Processamento eletronico de dados - Processamento
Link de acesso: https://hdl.handle.net/1884/40913
Resumo: Orientador: Prof. Dr. Carmem Satie Hara
id UFPR_5ba60fe72df53adf5703f1fc5ea0189a
oai_identifier_str oai:acervodigital.ufpr.br:1884/40913
network_acronym_str UFPR
network_name_str Repositório Institucional da UFPR
repository_id_str
spelling Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em InformáticaHara, Carmem Satie, 1964-Hoss, Diego Jonathan2024-10-31T20:12:08Z2024-10-31T20:12:08Z2015https://hdl.handle.net/1884/40913Orientador: Prof. Dr. Carmem Satie HaraDissertação (mestrado) - Universidade Federal do Paraná, Setor de Ciências Exatas, Programa de Pós-Graduação em Informática. Defesa: Curitiba, 24/09/2015Inclui referências : f. 88-92Resumo: O monitoramento de redes é uma atividade pertencente à área de gerência de redes, na qual efetua-se a coleta, armazenamento, processamento e análise dos dados de monitoramento. Para realizar esta atividade, existem ferramentas que implementam tais funcionalidades. Grande parte destas ferramentas são baseadas na arquitetura centralizada, e entre elas encontra-se o NfSen/Nfdump. Esta ferramenta é amplamente utilizada pelos administradores de rede por possuir boa documentação e ser de código aberto. O modelo centralizado possui limitações associadas à escalabilidade que são inerentes à arquitetura. Entre elas está a falta de redundância, um ponto único de falha e a ausência de balanceamento de carga. Isto significa que as ferramentas com arquitetura centralizada estão sujeitas a essas limitações, ou seja, existem limites no volume de armazenamento bem como na sua capacidade de coleta e processamento. Na literatura, encontram-se soluções para este problema baseadas em compressão dos dados e armazenamento distribuído de dados. Nesta dissertação, é proposta uma arquitetura distribuída chamada DASFlow aplicada à ferramenta de monitoramento de rede NfSen/Nfdump, cujo o objetivo é prover escalabilidade de coleta, armazenamento e processamento. Para isso, a arquitetura define os módulos StoreDAS-Cliente e StoreDAS-Servidor que atuam em conjunto com o sistema de arquivos distribuído (SAD) para prover escalabilidade de coleta e armazenamento. A escalabilidade de processamento é fornecida pelos módulos QueryDAS-Cliente e QueryDAS-Servidor. A arquitetura também prevê a existência do módulo de Metadados responsável por manter as informações sobre o armazenamento e distribuição dos dados de monitoramento. Os resultados experimentais mostram o potencial da arquitetura proposta. O DASFlow obteve menores tempos de resposta para o processamento das consultas mais frequentes que variam entre 13% e 34%, se comparados à ferramenta NfSen/Nfdump. Adicionalmente, a adoção de um sistema de arquivos distribuído mostrase eficaz ao prover escalabilidade para o armazenamento dos dados de monitoramento de rede.Abstract: Network monitoring is one of the activities of the network management field, in which one collects, stores, processes and analyzes monitoring data. It relies on tools that implement such functionalities. Many of these tools are based on a centralized architecture, and among them is NfSen/Nfdump. NfSen/Nfdump is widely used among network administrators, due to a good documentation and the fact that it is open source. The centralized model has some limitations with respect to scalability, which are inherent to the architecture. One of them is the lack of redundancy, single point of failure and the absence of load balancing. As a result, centralized architecture tools are subject to the some limitations. That is, storage capacity is limited as well as the ability to collect and process data. Solutions to solve these problems, based on data compression and distributed data storage, can be found in the literature. In this dissertation, we propose a distributed architecture called DASFlow, which provides scalability for data collection, storage and processing. In this regard, the architecture defines the StoreDAS-Cliente and StoreDASServidor modules, which work together with a distributed file system (DFS) in order to provide data collection and storage scalability. Processing scalability is provided by the QueryDAS-Cliente and QueryDAS-Servidor modules. The architecture also contains a Metadata module, responsible for keeping the information about storage and distribution of monitoring data. The architecture has been implemented with the NfSen/Nfdump network monitoring tool and Ceph distributed file system. The experimental results show that the DASFlow architecture has achieved shorter response times for the processing of the most frequent queries, which vary between 13% and 34%, if compared to the original NfSen/Nfdump tool. Additionally, the use of a distributed file system has proved to be efficient in providing scalability for the storage of network monitoring data.92 f. : il. algumas color.application/pdfDisponível em formato digitalCiência da computaçãoMetadadosProcessamento eletronico de dados - ProcessamentoDasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de redeinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisporreponame:Repositório Institucional da UFPRinstname:Universidade Federal do Paraná (UFPR)instacron:UFPRinfo:eu-repo/semantics/openAccessTEXTR - D - DIEGO JONATHAN HOSS.pdf.txtExtracted Texttext/plain160830https://acervodigital.ufpr.br/bitstream/1884/40913/1/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf.txte1ccd2145b81051bb881612d91a78c30MD51open accessORIGINALR - D - DIEGO JONATHAN HOSS.pdfapplication/pdf1707776https://acervodigital.ufpr.br/bitstream/1884/40913/2/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf03c143c4a632abdd989f93e481633e82MD52open accessTHUMBNAILR - D - DIEGO JONATHAN HOSS.pdf.jpgGenerated Thumbnailimage/jpeg1214https://acervodigital.ufpr.br/bitstream/1884/40913/3/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf.jpgf13619379d2ff343ab1fcf785f8374a3MD53open access1884/409132024-10-31 17:12:08.48open accessoai:acervodigital.ufpr.br:1884/40913Repositório InstitucionalPUBhttp://acervodigital.ufpr.br/oai/requestinformacaodigital@ufpr.bropendoar:3082024-10-31T20:12:08Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)false
dc.title.pt_BR.fl_str_mv Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
title Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
spellingShingle Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
Hoss, Diego Jonathan
Ciência da computação
Metadados
Processamento eletronico de dados - Processamento
title_short Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
title_full Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
title_fullStr Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
title_full_unstemmed Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
title_sort Dasflow : uma arquitetura distribuída de armazenamento e processamento para dados de monitoramento de rede
author Hoss, Diego Jonathan
author_facet Hoss, Diego Jonathan
author_role author
dc.contributor.other.pt_BR.fl_str_mv Universidade Federal do Paraná. Setor de Ciências Exatas. Programa de Pós-Graduação em Informática
dc.contributor.advisor1.fl_str_mv Hara, Carmem Satie, 1964-
dc.contributor.author.fl_str_mv Hoss, Diego Jonathan
contributor_str_mv Hara, Carmem Satie, 1964-
dc.subject.por.fl_str_mv Ciência da computação
Metadados
Processamento eletronico de dados - Processamento
topic Ciência da computação
Metadados
Processamento eletronico de dados - Processamento
description Orientador: Prof. Dr. Carmem Satie Hara
publishDate 2015
dc.date.issued.fl_str_mv 2015
dc.date.accessioned.fl_str_mv 2024-10-31T20:12:08Z
dc.date.available.fl_str_mv 2024-10-31T20:12:08Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1884/40913
url https://hdl.handle.net/1884/40913
dc.language.iso.fl_str_mv por
language por
dc.relation.pt_BR.fl_str_mv Disponível em formato digital
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 92 f. : il. algumas color.
application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFPR
instname:Universidade Federal do Paraná (UFPR)
instacron:UFPR
instname_str Universidade Federal do Paraná (UFPR)
instacron_str UFPR
institution UFPR
reponame_str Repositório Institucional da UFPR
collection Repositório Institucional da UFPR
bitstream.url.fl_str_mv https://acervodigital.ufpr.br/bitstream/1884/40913/1/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf.txt
https://acervodigital.ufpr.br/bitstream/1884/40913/2/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf
https://acervodigital.ufpr.br/bitstream/1884/40913/3/R%20-%20D%20-%20DIEGO%20JONATHAN%20HOSS.pdf.jpg
bitstream.checksum.fl_str_mv e1ccd2145b81051bb881612d91a78c30
03c143c4a632abdd989f93e481633e82
f13619379d2ff343ab1fcf785f8374a3
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)
repository.mail.fl_str_mv informacaodigital@ufpr.br
_version_ 1847526159466627072

Registros relacionados