Transferência de Aprendizado por Reforço para Elasticidade de Serviço de Nuvem

Dissertação de Mestrado
por Caroline Félix de Oliveira
Publicado: 20/02/2024 - 10:12
Última modificação: 20/02/2024 - 10:19

Linha de pesquisa: Sistemas de Computação

Resumo: Paradigmas emergentes, como "Slice-as-a-Service", exigem orquestradores para gerenciar recursos desde o início da operação da Slice, garantindo um controle eficiente sobre os acordos de nível de serviço. Além disso, o treinamento de aprendizado de máquina online em ambientes reais enfrenta desafios em complexidade, duração de treinamento, preocupações com segurança e rigidez do sistema. Esta dissertação tem como objetivo aprimorar e viabilizar o processo de treinamento de Aprendizado por Reforço para tarefas relacionadas à orquestração de recursos de serviços de nuvem, utilizando a Transferência de Aprendizado (TL). Um ambiente fonte foi construído, composto por um modelo de simulação do serviço, e o conhecimento adquirido em treinamento em simulação foi transferido para aprimorar o novo treinamento no ambiente do mundo real. Uma análise comparativa entre TL e métodos de treinamento tradicionais apresenta resultados positivos, incluindo uma redução substancial no tempo necessário para alcançar um desempenho razoável, melhorias de até 40% no desempenho inicial dos agentes e um aprimoramento de até 30% no desempenho geral durante as fases de treinamento e teste. Por fim, foi demonstrado que um agente treinado em simulação pode ser reutilizado diretamente no ambiente real sem treinamento adicional, produzindo resultados satisfatórios e consistentes.

Link para a defesa: https://teams.microsoft.com/l/meetup-join/19%3ameeting_OWY1OTE4YWYtNDAzZ...

Orientador: Rafael Pasquini
Coorientador: Matías Mario Richart Gutiérrez - University of the Republic in Uruguay
Banca Examinadora: 
- Universidade Federal de Uberlândia, Centro de Ciências Exatas e Tecnologia, Faculdade de Ciências da Computação
Rodolfo Villaça - Universidade Federal do Espírito Santo, Centro Tecnológico, Departamento de Informática
Data e Horário: 
29/02/2024 - 09:00
Virtual, 2121 1B
Uberlândia, Minas Gerais, Brasil
38400-902
Campus Santa Mônica - Bloco 1B - Sala 230
Complemento: 
1B