Throughput and latency Q-learning-based random access protocols for mMTC systems

Detalhes bibliográficos
Ano de defesa: 2024
Autor(a) principal: Silva, Giovanni Maciel Ferreira
Orientador(a): Abrão, Taufik [Orientador]
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Engenharia elétrica
mMTC
Q-learning
Acesso aleatório
NOMA
Electric engineering
Random acess
Link de acesso: https://repositorio.uel.br/handle/123456789/15197
Resumo: Resumo: As redes de comunicação do tipo máquina massiva (mMTC - massive machine-type communication) terão um papel fundamental nos sistemas de sexta geração de comunicação sem fio (6G) Neste modo de uso da rede, milhares de dispositivos disputam os recursos de acesso disponíveis para o envio de pacotes, como por exemplo uma rede de sensores no campo ou uma fábrica automatizada da indústria 4 Nesse cenário, surge o problema de acesso aleatório, no qual os dispositivos selecionam aleatoriamente os recursos da rede e colisões ocorrem com frequência Uma das formas promissoras de resolver esse problema é utilizar algoritmos de aprendizado por reforço QL (Q-learning) Neste trabalho, algumas técnicas presentes na literatura como os algoritmos QL-Independente e QL-Colaborativo são analisadas em termos de vazão e latência Também são propostos um algoritmo distribuído baseado em pacotes de baixa complexidade, bem como melhorias na técnica QL-Colaborativa Finalmente, analisa-se a disparidade de potência entre dispositivos em uma célula com a utilização de acesso múltiplo não ortogonal (NOMA - non-orthogonal multiple access) com um nó central aplicando o cancelamento sucessivo de interferência (SIC - successive interference cancellation) para reduzir a probabilidade de colisões Neste contexto, é proposto um algoritmo QL com múltiplos níveis de potência capaz de aumentar a vazão enquanto reduz a latência de redes NOMA mMTC
id UEL_49797543f2b816d1c1397bc2b84deb21
oai_identifier_str oai:repositorio.uel.br:123456789/15197
network_acronym_str UEL
network_name_str Repositório Institucional da UEL
repository_id_str
spelling Silva, Giovanni Maciel FerreiraBrante, Glauber Gomes de Oliveiradc2a92f9-f45a-4296-988f-df6c4f8b7b30-1Costa, Marcello Gonçalves80c3387b-a5e7-4777-b8f1-9f9e123027c4-160f0d410-75b8-47d1-adaf-44bd7147c6739ed79510-037e-418c-bfac-ebb6caa228aaAbrão, Taufik [Orientador]Londrina2024-05-01T14:45:55Z2024-05-01T14:45:55Z2022.0015.12.2021https://repositorio.uel.br/handle/123456789/15197Resumo: As redes de comunicação do tipo máquina massiva (mMTC - massive machine-type communication) terão um papel fundamental nos sistemas de sexta geração de comunicação sem fio (6G) Neste modo de uso da rede, milhares de dispositivos disputam os recursos de acesso disponíveis para o envio de pacotes, como por exemplo uma rede de sensores no campo ou uma fábrica automatizada da indústria 4 Nesse cenário, surge o problema de acesso aleatório, no qual os dispositivos selecionam aleatoriamente os recursos da rede e colisões ocorrem com frequência Uma das formas promissoras de resolver esse problema é utilizar algoritmos de aprendizado por reforço QL (Q-learning) Neste trabalho, algumas técnicas presentes na literatura como os algoritmos QL-Independente e QL-Colaborativo são analisadas em termos de vazão e latência Também são propostos um algoritmo distribuído baseado em pacotes de baixa complexidade, bem como melhorias na técnica QL-Colaborativa Finalmente, analisa-se a disparidade de potência entre dispositivos em uma célula com a utilização de acesso múltiplo não ortogonal (NOMA - non-orthogonal multiple access) com um nó central aplicando o cancelamento sucessivo de interferência (SIC - successive interference cancellation) para reduzir a probabilidade de colisões Neste contexto, é proposto um algoritmo QL com múltiplos níveis de potência capaz de aumentar a vazão enquanto reduz a latência de redes NOMA mMTCDissertação (Mestrado em Engenharia Elétrica) - Universidade Estadual de Londrina, Centro de Tecnologia e Urbanismo, Programa de Pós-Graduação em Engenharia ElétricaAbstract: Massive machine-type communication (mMTC) networks will play a key role in sixth generation wireless communication systems (6G) Thousands of devices compete for network resources for sending packets, such as a sensor network in a farm or an automated factory in Industry 4 In this scenario, the random access (RA) problem arises, in which devices randomly select network resources and collisions occur frequently One of the promising ways to solve this problem is to use Q-learning (QL) algorithms In this work, some machine learning-based techniques available in the literature such as independent and collaborative QL algorithms are analyzed in terms of system throughput and latency An improvement in the QL collaborative technique and a low-complexity distributed packet-based algorithm are also proposed Finally, the power disparity between devices in a cell is analyzed using non-orthogonal multiple access (NOMA) with a central node applying successive interference cancellation (SIC) to reduce collisions A QL algorithm with multi-power levels that increases throughput and reduces latency in NOMA mMTC scenarios is proposedporEngenharia elétricamMTCQ-learningAcesso aleatórioNOMAElectric engineeringmMTCQ-learningRandom acessNOMAThroughput and latency Q-learning-based random access protocols for mMTC systemsinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisMestradoEngenharia ElétricaCentro de Tecnologia e UrbanismoPrograma de Pós-Graduação em Engenharia Elétrica-1-1reponame:Repositório Institucional da UELinstname:Universidade Estadual de Londrina (UEL)instacron:UELinfo:eu-repo/semantics/openAccess17380vtls000235339SIMvtls000235339http://www.bibliotecadigital.uel.br/document/?code=vtls00023533964.00SIMhttp://www.bibliotecadigital.uel.br/document/?code=vtls0002353398498.pdf123456789/20802 - Mestrado - Engenharia ElétricaORIGINAL8498.pdfapplication/pdf4352220https://repositorio.uel.br/bitstreams/bd72f287-d993-4e53-977c-7a49aade6076/download28265dad454b2c7e93a2f7df82772291MD51LICENCElicence.txttext/plain263https://repositorio.uel.br/bitstreams/6b3a3cfa-e836-46ce-b7a5-776eb5a73002/download753f376dfdbc064b559839be95ac5523MD52TEXT8498.pdf.txt8498.pdf.txtExtracted texttext/plain236858https://repositorio.uel.br/bitstreams/5540b5e6-a9e8-4aef-9bf4-e1624ac62122/downloadf782ea1d777bf6d7d64ee97e0740a4a4MD53THUMBNAIL8498.pdf.jpg8498.pdf.jpgGenerated Thumbnailimage/jpeg3463https://repositorio.uel.br/bitstreams/ba8e579e-0983-4e70-9139-fddb651271e5/downloadfb7be32046861827c2569ccce819b1edMD54123456789/151972024-07-12 01:19:48.98open.accessoai:repositorio.uel.br:123456789/15197https://repositorio.uel.brBiblioteca Digital de Teses e Dissertaçõeshttp://www.bibliotecadigital.uel.br/PUBhttp://www.bibliotecadigital.uel.br/OAI/oai2.phpbcuel@uel.br||opendoar:2024-07-12T04:19:48Repositório Institucional da UEL - Universidade Estadual de Londrina (UEL)false
dc.title.pt_BR.fl_str_mv Throughput and latency Q-learning-based random access protocols for mMTC systems
title Throughput and latency Q-learning-based random access protocols for mMTC systems
spellingShingle Throughput and latency Q-learning-based random access protocols for mMTC systems
Silva, Giovanni Maciel Ferreira
Engenharia elétrica
mMTC
Q-learning
Acesso aleatório
NOMA
Electric engineering
mMTC
Q-learning
Random acess
NOMA
title_short Throughput and latency Q-learning-based random access protocols for mMTC systems
title_full Throughput and latency Q-learning-based random access protocols for mMTC systems
title_fullStr Throughput and latency Q-learning-based random access protocols for mMTC systems
title_full_unstemmed Throughput and latency Q-learning-based random access protocols for mMTC systems
title_sort Throughput and latency Q-learning-based random access protocols for mMTC systems
author Silva, Giovanni Maciel Ferreira
author_facet Silva, Giovanni Maciel Ferreira
author_role author
dc.contributor.banca.pt_BR.fl_str_mv Brante, Glauber Gomes de Oliveira
Costa, Marcello Gonçalves
dc.contributor.author.fl_str_mv Silva, Giovanni Maciel Ferreira
dc.contributor.authorID.fl_str_mv 60f0d410-75b8-47d1-adaf-44bd7147c673
dc.contributor.advisor1ID.fl_str_mv 9ed79510-037e-418c-bfac-ebb6caa228aa
dc.contributor.advisor1.fl_str_mv Abrão, Taufik [Orientador]
contributor_str_mv Abrão, Taufik [Orientador]
dc.subject.por.fl_str_mv Engenharia elétrica
mMTC
Q-learning
Acesso aleatório
NOMA
Electric engineering
mMTC
Q-learning
Random acess
NOMA
topic Engenharia elétrica
mMTC
Q-learning
Acesso aleatório
NOMA
Electric engineering
mMTC
Q-learning
Random acess
NOMA
description Resumo: As redes de comunicação do tipo máquina massiva (mMTC - massive machine-type communication) terão um papel fundamental nos sistemas de sexta geração de comunicação sem fio (6G) Neste modo de uso da rede, milhares de dispositivos disputam os recursos de acesso disponíveis para o envio de pacotes, como por exemplo uma rede de sensores no campo ou uma fábrica automatizada da indústria 4 Nesse cenário, surge o problema de acesso aleatório, no qual os dispositivos selecionam aleatoriamente os recursos da rede e colisões ocorrem com frequência Uma das formas promissoras de resolver esse problema é utilizar algoritmos de aprendizado por reforço QL (Q-learning) Neste trabalho, algumas técnicas presentes na literatura como os algoritmos QL-Independente e QL-Colaborativo são analisadas em termos de vazão e latência Também são propostos um algoritmo distribuído baseado em pacotes de baixa complexidade, bem como melhorias na técnica QL-Colaborativa Finalmente, analisa-se a disparidade de potência entre dispositivos em uma célula com a utilização de acesso múltiplo não ortogonal (NOMA - non-orthogonal multiple access) com um nó central aplicando o cancelamento sucessivo de interferência (SIC - successive interference cancellation) para reduzir a probabilidade de colisões Neste contexto, é proposto um algoritmo QL com múltiplos níveis de potência capaz de aumentar a vazão enquanto reduz a latência de redes NOMA mMTC
publishDate 2024
dc.date.defesa.pt_BR.fl_str_mv 15.12.2021
dc.date.created.fl_str_mv 2022.00
dc.date.accessioned.fl_str_mv 2024-05-01T14:45:55Z
dc.date.available.fl_str_mv 2024-05-01T14:45:55Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://repositorio.uel.br/handle/123456789/15197
url https://repositorio.uel.br/handle/123456789/15197
dc.language.iso.fl_str_mv por
language por
dc.relation.confidence.fl_str_mv -1
-1
dc.relation.coursedegree.pt_BR.fl_str_mv Mestrado
dc.relation.coursename.pt_BR.fl_str_mv Engenharia Elétrica
dc.relation.departament.pt_BR.fl_str_mv Centro de Tecnologia e Urbanismo
dc.relation.ppgname.pt_BR.fl_str_mv Programa de Pós-Graduação em Engenharia Elétrica
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.coverage.spatial.pt_BR.fl_str_mv Londrina
dc.source.none.fl_str_mv reponame:Repositório Institucional da UEL
instname:Universidade Estadual de Londrina (UEL)
instacron:UEL
instname_str Universidade Estadual de Londrina (UEL)
instacron_str UEL
institution UEL
reponame_str Repositório Institucional da UEL
collection Repositório Institucional da UEL
bitstream.url.fl_str_mv https://repositorio.uel.br/bitstreams/bd72f287-d993-4e53-977c-7a49aade6076/download
https://repositorio.uel.br/bitstreams/6b3a3cfa-e836-46ce-b7a5-776eb5a73002/download
https://repositorio.uel.br/bitstreams/5540b5e6-a9e8-4aef-9bf4-e1624ac62122/download
https://repositorio.uel.br/bitstreams/ba8e579e-0983-4e70-9139-fddb651271e5/download
bitstream.checksum.fl_str_mv 28265dad454b2c7e93a2f7df82772291
753f376dfdbc064b559839be95ac5523
f782ea1d777bf6d7d64ee97e0740a4a4
fb7be32046861827c2569ccce819b1ed
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UEL - Universidade Estadual de Londrina (UEL)
repository.mail.fl_str_mv bcuel@uel.br||
_version_ 1865915182041006080

Registros relacionados