Deep reinforcement learning applied to power control in D2D communications

Registro completo de metadados
MetadadosDescriçãoIdioma
Autor(es): dc.contributorMenezes, Leonardo Rodrigues Araújo Xavier de-
Autor(es): dc.contributorlucasbaiao@gmail.com-
Autor(es): dc.creatorPires, Lucas Baião-
Data de aceite: dc.date.accessioned2024-10-23T16:19:57Z-
Data de disponibilização: dc.date.available2024-10-23T16:19:57Z-
Data de envio: dc.date.issued2021-09-03-
Data de envio: dc.date.issued2021-09-03-
Data de envio: dc.date.issued2021-09-03-
Data de envio: dc.date.issued2021-06-28-
Fonte completa do material: dc.identifierhttps://repositorio.unb.br/handle/10482/42018-
Fonte: dc.identifier.urihttp://educapes.capes.gov.br/handle/capes/905696-
Descrição: dc.descriptionDissertação (mestrado) — Universidade de Brasília, Faculdade de Tecnologia, Departamento de Engenharia Elétrica, 2021.-
Descrição: dc.descriptionO rápido avanço da digitalização do mundo, juntamente com as novas aplicações e serviços suportados pelo 5G, trazem a necessidade de se aumentar a eficiência espectral dos sistemas de comunicações móveis. Uma das propostas para atingir este objetivo, e também habilitar diversas aplicações da Indústria 4.0, são as comunicações D2D. Neste trabalho, são apresentados estudos sobre a viabilidade e desempenho de técnicas de aprendizagem por reforço no controle de potência de dispositivos nas comunicações D2D. A fim de obter soluções mais adaptativas, e capazes de aprender com o ambiente em que atuam, optou-se por explorar técnicas de aprendizagem por reforço, que são parte da família de algoritmos de aprendizagem de máquina, e que são capazes de encontrar soluções para diversos problemas utilizando experiências adquiridas, sem a necessidade de uma base de dados anterior ao processo de treinamento. Neste trabalho, exploraram-se duas técnicas de ações discretas, que seguem diferentes paradigmas, e uma técnica de ações contínuas. Para cada uma delas, são discorridas as teorias que as compõem, bem como os processos de decisão markovianos desenvolvidos para a implementação destas. Os desempenhos das soluções são avaliados e comparados entre si, bem como a capacidade de adaptação de cada uma das soluções. Os resultados foram obtidos por meio de um simulador computacional de interferências, desenvolvido ao longo do trabalho. As principais contribuições deste trabalho são as proposições de algoritmos baseados em aprendizagem profunda por reforço para o aumento da eficiência espectral do sistema, juntamente com a satisfação dos requisitos de qualidade de serviço do usuário primário, por meio do controle de potência de transmissão na comunicação D2D no modo inband underlay. Além disso, são feitas diversas análises dos algoritmos propostos, para entendimento do comportamento dessas soluções.-
Descrição: dc.descriptionCoordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES).-
Descrição: dc.descriptionThe fast digitalization advancement in the world, along with the new applications and services supported by 5G, brings the need to increase the spectral efficiency for the mobile communications systems. One of the propositions for helping achieve this goal, and enabling diverse applications in Industry 4.0, is D2D communications. This work presents studies on the performance and the viability of reinforcement learning techniques applied to device power control in D2D communication. In order to achieve more adaptable solutions, and capable of learning with the environment they act upon, it was opted on exploring reinforcement learning techniques, which are members of the machine learning algorithms family, and are able to find solutions, for diverse problems, using acquired experiences, without requiring a database, prior to the training. In this work, two discrete-action techniques were explored, which are based upon different paradigms, and one continuous-action technique. For each one of them, it was presented their fundamental theories, as well as the developed markovian processes for their implementation. The solutions' performances are evaluated, along with their adaptation capacities. The results were obtained through a computational interferences simulator, developed throughout this work. The main contributions from this work are the proposed deep reinforcement learning- based algorithms for enhancing the system spectral efficiency, while satisfying the primary user QoS requirements, through the transmit power control in inband underlay D2D communication. Furthermore, this work provides in-depth analysis on the proposed algorithms, for a better understanding on the solutions' behaviours.-
Descrição: dc.descriptionFaculdade de Tecnologia (FT)-
Descrição: dc.descriptionDepartamento de Engenharia Elétrica (FT ENE)-
Descrição: dc.descriptionPrograma de Pós-Graduação em Engenharia Elétrica-
Formato: dc.formatapplication/pdf-
Direitos: dc.rightsAcesso Aberto-
Direitos: dc.rightsA concessão da licença deste item refere-se ao termo de autorização impresso assinado pelo autor com as seguintes condições: Na qualidade de titular dos direitos de autor da publicação, autorizo a Universidade de Brasília e o IBICT a disponibilizar por meio dos sites www.bce.unb.br, www.ibict.br, http://hercules.vtls.com/cgi-bin/ndltd/chameleon?lng=pt&skin=ndltd sem ressarcimento dos direitos autorais, de acordo com a Lei nº 9610/98, o texto integral da obra disponibilizada, conforme permissões assinaladas, para fins de leitura, impressão e/ou download, a título de divulgação da produção científica brasileira, a partir desta data.-
Palavras-chave: dc.subjectAprendizagem por reforço-
Palavras-chave: dc.subjectComunicação D2D-
Palavras-chave: dc.subjectAprendizagem profunda-
Palavras-chave: dc.subject5G-
Título: dc.titleDeep reinforcement learning applied to power control in D2D communications-
Título: dc.titleAprendizagem por reforço profunda aplicada ao controle de potência nas comunicações D2D-
Tipo de arquivo: dc.typelivro digital-
Aparece nas coleções:Repositório Institucional – UNB

Não existem arquivos associados a este item.