Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.

Detalhes bibliográficos
Ano de defesa: 1999
Autor(a) principal: Guardia, Helio Crestana
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Biblioteca Digitais de Teses e Dissertações da USP
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Arquivos paralelos
Distributed systems
Parallel files
Sistemas distribuídos
Link de acesso: https://www.teses.usp.br/teses/disponiveis/3/3142/tde-05122024-090453/
Resumo: A necessidade de armazenamento de grandes volumes de dados e de mecanismos para a transferência desses dados entre disco e memória em velocidades compatíveis com o processamento das aplicações levou à criação dos arquivos paralelos. Arquivos paralelos tratam do particionamento e da distribuição dos dados entre diversos servidores. Nesses arquivos, a transferência em paralelo para os diversos discos ocasiona o aumento do throughput, e a presença de diversos níveis de buffers provê a diminuição da latência no acesso aos dados sendo manipulados. A utilização de arquivos paralelos em aplicações distribuídas, contudo, apresenta novos problemas para o sistema de arquivos, podendo inviabilizar a escalabilidade de muitas aplicações. Este trabalho apresenta um estudo sobre a criação de um sistema de arquivos paralelos que forneça otimizações para o desenvolvimento de aplicações paralelas distribuídas e com grandes volumes de operações de E/S. Para tanto, o sistema NPFS foi desenvolvido, agregando metodologias utilizadas em outros sistemas e introduzindo novos mecanismos específicos para a sua integração com a criação e distribuição de processos. O sistema NPFS é apresentado e as principais estratégias adotadas em seu projeto são discutidas. A avaliação do sistema mostra a viabilidade de sua utilização, proporcionando a escalabilidade de uma aplicação paralela distribuída.
id USP_e7b675a868bf3768165eaccd30601209
oai_identifier_str oai:teses.usp.br:tde-05122024-090453
network_acronym_str USP
network_name_str Biblioteca Digital de Teses e Dissertações da USP
repository_id_str
spelling Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.Untitled in englishArquivos paralelosDistributed systemsParallel filesSistemas distribuídosA necessidade de armazenamento de grandes volumes de dados e de mecanismos para a transferência desses dados entre disco e memória em velocidades compatíveis com o processamento das aplicações levou à criação dos arquivos paralelos. Arquivos paralelos tratam do particionamento e da distribuição dos dados entre diversos servidores. Nesses arquivos, a transferência em paralelo para os diversos discos ocasiona o aumento do throughput, e a presença de diversos níveis de buffers provê a diminuição da latência no acesso aos dados sendo manipulados. A utilização de arquivos paralelos em aplicações distribuídas, contudo, apresenta novos problemas para o sistema de arquivos, podendo inviabilizar a escalabilidade de muitas aplicações. Este trabalho apresenta um estudo sobre a criação de um sistema de arquivos paralelos que forneça otimizações para o desenvolvimento de aplicações paralelas distribuídas e com grandes volumes de operações de E/S. Para tanto, o sistema NPFS foi desenvolvido, agregando metodologias utilizadas em outros sistemas e introduzindo novos mecanismos específicos para a sua integração com a criação e distribuição de processos. O sistema NPFS é apresentado e as principais estratégias adotadas em seu projeto são discutidas. A avaliação do sistema mostra a viabilidade de sua utilização, proporcionando a escalabilidade de uma aplicação paralela distribuída.The need for large storage capacity and for data transfer between memory and secondary storage at rates compatible with the data processing has led to the creation of parallel files. A parallel file corresponds to a single logical file whose data is partitioned and distributed among several disks aiming to combine the parallel accesses for a better transfer rate, and the presence of several buffer levels to reduce the latency of the accesses. The use of parallel files in distributed applications however presents new challenges to the file system and can inhibit the scalability of many parallel applications. This work presents a study on the creation of a parallel file system which provides optimizations to the development of distributed parallel applications with large amount of I/O operations. As a result, the NPFS system was developed introducing new tools which integrate file system operations with a mechanism for process creation and distribution. The NPFS system is presented and the main strategies used in its implementation are discussed. The system evaluation shows the viability of its utilization allowing the scalability of a distributed parallel application.Biblioteca Digitais de Teses e Dissertações da USPSato, Liria MatsumotoGuardia, Helio Crestana1999-11-11info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfhttps://www.teses.usp.br/teses/disponiveis/3/3142/tde-05122024-090453/reponame:Biblioteca Digital de Teses e Dissertações da USPinstname:Universidade de São Paulo (USP)instacron:USPLiberar o conteúdo para acesso público.info:eu-repo/semantics/openAccesspor2024-12-05T11:08:02Zoai:teses.usp.br:tde-05122024-090453Biblioteca Digital de Teses e Dissertaçõeshttp://www.teses.usp.br/PUBhttp://www.teses.usp.br/cgi-bin/mtd2br.plvirginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.bropendoar:27212024-12-05T11:08:02Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)false
dc.title.none.fl_str_mv Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
Untitled in english
title Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
spellingShingle Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
Guardia, Helio Crestana
Arquivos paralelos
Distributed systems
Parallel files
Sistemas distribuídos
title_short Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
title_full Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
title_fullStr Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
title_full_unstemmed Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
title_sort Considerações sobre as estratégias de um sistema de arquivos paralelos integrado ao processamento distribuído.
author Guardia, Helio Crestana
author_facet Guardia, Helio Crestana
author_role author
dc.contributor.none.fl_str_mv Sato, Liria Matsumoto
dc.contributor.author.fl_str_mv Guardia, Helio Crestana
dc.subject.por.fl_str_mv Arquivos paralelos
Distributed systems
Parallel files
Sistemas distribuídos
topic Arquivos paralelos
Distributed systems
Parallel files
Sistemas distribuídos
description A necessidade de armazenamento de grandes volumes de dados e de mecanismos para a transferência desses dados entre disco e memória em velocidades compatíveis com o processamento das aplicações levou à criação dos arquivos paralelos. Arquivos paralelos tratam do particionamento e da distribuição dos dados entre diversos servidores. Nesses arquivos, a transferência em paralelo para os diversos discos ocasiona o aumento do throughput, e a presença de diversos níveis de buffers provê a diminuição da latência no acesso aos dados sendo manipulados. A utilização de arquivos paralelos em aplicações distribuídas, contudo, apresenta novos problemas para o sistema de arquivos, podendo inviabilizar a escalabilidade de muitas aplicações. Este trabalho apresenta um estudo sobre a criação de um sistema de arquivos paralelos que forneça otimizações para o desenvolvimento de aplicações paralelas distribuídas e com grandes volumes de operações de E/S. Para tanto, o sistema NPFS foi desenvolvido, agregando metodologias utilizadas em outros sistemas e introduzindo novos mecanismos específicos para a sua integração com a criação e distribuição de processos. O sistema NPFS é apresentado e as principais estratégias adotadas em seu projeto são discutidas. A avaliação do sistema mostra a viabilidade de sua utilização, proporcionando a escalabilidade de uma aplicação paralela distribuída.
publishDate 1999
dc.date.none.fl_str_mv 1999-11-11
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.teses.usp.br/teses/disponiveis/3/3142/tde-05122024-090453/
url https://www.teses.usp.br/teses/disponiveis/3/3142/tde-05122024-090453/
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv
dc.rights.driver.fl_str_mv Liberar o conteúdo para acesso público.
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Liberar o conteúdo para acesso público.
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.coverage.none.fl_str_mv
dc.publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
dc.source.none.fl_str_mv
reponame:Biblioteca Digital de Teses e Dissertações da USP
instname:Universidade de São Paulo (USP)
instacron:USP
instname_str Universidade de São Paulo (USP)
instacron_str USP
institution USP
reponame_str Biblioteca Digital de Teses e Dissertações da USP
collection Biblioteca Digital de Teses e Dissertações da USP
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)
repository.mail.fl_str_mv virginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.br
_version_ 1818598502083592192

Registros relacionados