Exportação concluída — 

\"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.

Detalhes bibliográficos
Ano de defesa: 2024
Autor(a) principal: Araújo, Túlio Oliveira
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Biblioteca Digitais de Teses e Dissertações da USP
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
V2X
Link de acesso: https://www.teses.usp.br/teses/disponiveis/3/3142/tde-13022025-103347/
Resumo: Os veículos autônomos (AVs) prometem ser uma das principais inovações da indústria automotiva nas próximas décadas. A redução no número de acidentes (muitos causados por erros humanos) e 0 aumento da eficiência e fluxo de tráfego (importante para ambientes urbanos), são algumas das razões pelas quais este é um dos temas mais pesquisados na indústria automotiva e na academia. 0 caminho para sistemas de transporte baseados em AVs requer ferramentas que possam facilitar essa transição. Houve grandes avanços nos sistemas de assistência ao motorista (ADAS), mas a transição para veículos completamente autônomos ainda enfrenta desafios. Mesmo com sensores e sistemas de processamento avançados, os veículos ainda não conseguem detectar todos os obstáculos. Uma nova linha de pesquisa ganhou força nos últimos anos, com o objetivo de conectar AVs a outros veículos, dispositivos e à nuvem, usando a comunicação de veículo a tudo (V2X) , resultando nos Veículos Autônomos Conectados (CAVs). Esse tipo de comunicação atende à necessidade de suprir essa demanda de informações, para que as decis6es tomadas pelas unidades de controle dos veículos autônomos sejam as mais precisas possíveis, bem como identificar todas as situações a que são expostos. Pesquisas recentes, com 0 intuito de aumentar a percepção dos veículos, tem sido realizadas tanto em veículos quanta em simulações. A primeira abordagem fornece uma interpretação precisa, mas e cara e lenta. As simulações, por outro lado, fornecem ferramentas rápidas e acessíveis para esses desenvolvimentos. Para facilitar a incorporação de métodos de Deep Reinforcement Learning (DRL) usados para 0 treinamento nos procedimentos de reconhecimento de padrões (de situações nas quais os veículos se encontram) por veículos autônomos (ou semi), foi criado 0 framework CarAware para simulações detalhadas de múltiplos veículos, que funciona em conjunto com 0 simulador de trânsito de código aberto CARLA. Este framework visa preencher a lacuna identificada nos frameworks de DRL para 0 CARLA atualmente disponíveis, muitas vezes focados na percepção e controle de um único veículo. Ele fornece a base para 0 treinamento de agentes DRL em cenários com vários veículos autônomos conectados (CAVs), com foco na fusão de dados de seus sensores para localização e identificação de objetos. A estrutura proposta apresenta uma maneira fácil de configurar sessões de treinamento por episódio, com número/modelos customizados de veículos (incluindo seus sensores), pedestres e obstáculos. Ele fornece uma visualização superior do mapa, com informações de alto nível sobre todos os objetos simulados e as principais métricas de treinamento. Também inclui suporte a algoritmos DRL, com métricas integradas e geração de relatórios. Como primeiro estudo de caso, para comprovar as funcionalidades básicas do framework, foram realizadas sessões de treinamento, focadas em sensores relacionados a posição e movimento dos veículos. No entanto, esta estrutura já apresenta as bases para uma futura implementação completa de fusão de sensores de CAYs. Esse modelo treinado poderia então ser implementado na nuvem, proporcionando 0 mapeamento do ambiente com objetos identificados naquela área, atuando como uma percepção coletiva desses veículos.
id USP_44d9c61c3bf6b3ea15d7cb069058f924
oai_identifier_str oai:teses.usp.br:tde-13022025-103347
network_acronym_str USP
network_name_str Biblioteca Digital de Teses e Dissertações da USP
repository_id_str
spelling \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.Caraware simulation framework for connected and autonomous vehicles: collective perception training using deep reinforcement learning.Aprendizado por refôrçoConnected autonomous vehiclesDeep reinforcement learningFrameworksSimulation frameworkV2XVeículos autônomosOs veículos autônomos (AVs) prometem ser uma das principais inovações da indústria automotiva nas próximas décadas. A redução no número de acidentes (muitos causados por erros humanos) e 0 aumento da eficiência e fluxo de tráfego (importante para ambientes urbanos), são algumas das razões pelas quais este é um dos temas mais pesquisados na indústria automotiva e na academia. 0 caminho para sistemas de transporte baseados em AVs requer ferramentas que possam facilitar essa transição. Houve grandes avanços nos sistemas de assistência ao motorista (ADAS), mas a transição para veículos completamente autônomos ainda enfrenta desafios. Mesmo com sensores e sistemas de processamento avançados, os veículos ainda não conseguem detectar todos os obstáculos. Uma nova linha de pesquisa ganhou força nos últimos anos, com o objetivo de conectar AVs a outros veículos, dispositivos e à nuvem, usando a comunicação de veículo a tudo (V2X) , resultando nos Veículos Autônomos Conectados (CAVs). Esse tipo de comunicação atende à necessidade de suprir essa demanda de informações, para que as decis6es tomadas pelas unidades de controle dos veículos autônomos sejam as mais precisas possíveis, bem como identificar todas as situações a que são expostos. Pesquisas recentes, com 0 intuito de aumentar a percepção dos veículos, tem sido realizadas tanto em veículos quanta em simulações. A primeira abordagem fornece uma interpretação precisa, mas e cara e lenta. As simulações, por outro lado, fornecem ferramentas rápidas e acessíveis para esses desenvolvimentos. Para facilitar a incorporação de métodos de Deep Reinforcement Learning (DRL) usados para 0 treinamento nos procedimentos de reconhecimento de padrões (de situações nas quais os veículos se encontram) por veículos autônomos (ou semi), foi criado 0 framework CarAware para simulações detalhadas de múltiplos veículos, que funciona em conjunto com 0 simulador de trânsito de código aberto CARLA. Este framework visa preencher a lacuna identificada nos frameworks de DRL para 0 CARLA atualmente disponíveis, muitas vezes focados na percepção e controle de um único veículo. Ele fornece a base para 0 treinamento de agentes DRL em cenários com vários veículos autônomos conectados (CAVs), com foco na fusão de dados de seus sensores para localização e identificação de objetos. A estrutura proposta apresenta uma maneira fácil de configurar sessões de treinamento por episódio, com número/modelos customizados de veículos (incluindo seus sensores), pedestres e obstáculos. Ele fornece uma visualização superior do mapa, com informações de alto nível sobre todos os objetos simulados e as principais métricas de treinamento. Também inclui suporte a algoritmos DRL, com métricas integradas e geração de relatórios. Como primeiro estudo de caso, para comprovar as funcionalidades básicas do framework, foram realizadas sessões de treinamento, focadas em sensores relacionados a posição e movimento dos veículos. No entanto, esta estrutura já apresenta as bases para uma futura implementação completa de fusão de sensores de CAYs. Esse modelo treinado poderia então ser implementado na nuvem, proporcionando 0 mapeamento do ambiente com objetos identificados naquela área, atuando como uma percepção coletiva desses veículos.Autonomous vehicles (AVs) promise to be one of the main innovations on the automotive industry in the next decades. A drastic reduction in the number of accidents (mostly caused by human errors) and an increase in the vehicles\' efficiency and traffic flow (important for urban environments), are some of the reasons why this is one of the most researched topics, both in the automotive industry and academy. The path to transportation systems based on AVs require tools that could facilitate this transition. There have been major progresses in advanced driver-assistance systems (ADAS), but the convergence to completely autonomous vehicles still faces great challenges. Even with current sensors and advanced processing systems, vehicles still can not detect all types of obstacles. A new line of research has gained momentum in recent years, with the aim of connecting AVs to other vehicles, devices and the cloud, using Vehicle-to-Everything (V2X) communication, resulting in the Connected and Autonomous Vehicles (CAVs). It meets the need to supply this demand for information, so that the decisions made by the autonomous vehicle\'s control units are as accurate as possible. Recent investigations, aiming to increase vehicle awareness, have been performed both in vehicles and simulations. The first approach provides a precise interpretation, but it is expensive and slow. Simulations, on the other hand, provide fast and affordable tools for those developments. To facilitate the incorporation of Deep Reinforcement Learning (DRL) methods used for training of pattern recognition (of situations in which vehicles are) by autonomous vehicles (or semi), we present the CarAware framework for detailed multi-agent vehicle simulations,· which works together with the open-source traffic simulator CARLA. This framework aims to fill the gap identified in currently available CARLA DRL frameworks, often focused on the perception and control of a single vehicle. It provides baselines for training DRL agents in scenarios with multiple connected autonomous vehicles (CAVs), focusing on their sensors\' data fusion for objects\' localization and identification. The proposed framework presents an easy way to set up episodic training sessions, with a customizable number/models of vehicles (including sensor customization), pedestrians, and obstacles. Moreover, it provides a top-view visualization of the map, with high-level information on all simulated objects and main training metrics. It also includes supporting DRL algorithms, with integrated metrics and report generation. As a first case study approach, to prove the basic functionalities of the framework, training sessions were performed, focused on sensors related to the vehicles\' position and motion. Nevertheless, this framework already presents the baselines for a future complete CAYs\' sensor fusion implementation. This trained model could then be implemented in cloud backend systems, providing the environment mapping with identified objects in that area, acting as a collective perception of these vehicles.Biblioteca Digitais de Teses e Dissertações da USPLobo Netto, MarcioAraújo, Túlio Oliveira2024-09-18info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttps://www.teses.usp.br/teses/disponiveis/3/3142/tde-13022025-103347/reponame:Biblioteca Digital de Teses e Dissertações da USPinstname:Universidade de São Paulo (USP)instacron:USPLiberar o conteúdo para acesso público.info:eu-repo/semantics/openAccesspor2025-03-07T16:24:01Zoai:teses.usp.br:tde-13022025-103347Biblioteca Digital de Teses e Dissertaçõeshttp://www.teses.usp.br/PUBhttp://www.teses.usp.br/cgi-bin/mtd2br.plvirginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.bropendoar:27212025-03-07T16:24:01Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)false
dc.title.none.fl_str_mv \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
Caraware simulation framework for connected and autonomous vehicles: collective perception training using deep reinforcement learning.
title \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
spellingShingle \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
Araújo, Túlio Oliveira
Aprendizado por refôrço
Connected autonomous vehicles
Deep reinforcement learning
Frameworks
Simulation framework
V2X
Veículos autônomos
title_short \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
title_full \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
title_fullStr \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
title_full_unstemmed \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
title_sort \"Caraware\" arcabouço para simulação de veículos conectados e autônomos: treinamento de percepção coletiva usando aprendizado profundo por reforço.
author Araújo, Túlio Oliveira
author_facet Araújo, Túlio Oliveira
author_role author
dc.contributor.none.fl_str_mv Lobo Netto, Marcio
dc.contributor.author.fl_str_mv Araújo, Túlio Oliveira
dc.subject.por.fl_str_mv Aprendizado por refôrço
Connected autonomous vehicles
Deep reinforcement learning
Frameworks
Simulation framework
V2X
Veículos autônomos
topic Aprendizado por refôrço
Connected autonomous vehicles
Deep reinforcement learning
Frameworks
Simulation framework
V2X
Veículos autônomos
description Os veículos autônomos (AVs) prometem ser uma das principais inovações da indústria automotiva nas próximas décadas. A redução no número de acidentes (muitos causados por erros humanos) e 0 aumento da eficiência e fluxo de tráfego (importante para ambientes urbanos), são algumas das razões pelas quais este é um dos temas mais pesquisados na indústria automotiva e na academia. 0 caminho para sistemas de transporte baseados em AVs requer ferramentas que possam facilitar essa transição. Houve grandes avanços nos sistemas de assistência ao motorista (ADAS), mas a transição para veículos completamente autônomos ainda enfrenta desafios. Mesmo com sensores e sistemas de processamento avançados, os veículos ainda não conseguem detectar todos os obstáculos. Uma nova linha de pesquisa ganhou força nos últimos anos, com o objetivo de conectar AVs a outros veículos, dispositivos e à nuvem, usando a comunicação de veículo a tudo (V2X) , resultando nos Veículos Autônomos Conectados (CAVs). Esse tipo de comunicação atende à necessidade de suprir essa demanda de informações, para que as decis6es tomadas pelas unidades de controle dos veículos autônomos sejam as mais precisas possíveis, bem como identificar todas as situações a que são expostos. Pesquisas recentes, com 0 intuito de aumentar a percepção dos veículos, tem sido realizadas tanto em veículos quanta em simulações. A primeira abordagem fornece uma interpretação precisa, mas e cara e lenta. As simulações, por outro lado, fornecem ferramentas rápidas e acessíveis para esses desenvolvimentos. Para facilitar a incorporação de métodos de Deep Reinforcement Learning (DRL) usados para 0 treinamento nos procedimentos de reconhecimento de padrões (de situações nas quais os veículos se encontram) por veículos autônomos (ou semi), foi criado 0 framework CarAware para simulações detalhadas de múltiplos veículos, que funciona em conjunto com 0 simulador de trânsito de código aberto CARLA. Este framework visa preencher a lacuna identificada nos frameworks de DRL para 0 CARLA atualmente disponíveis, muitas vezes focados na percepção e controle de um único veículo. Ele fornece a base para 0 treinamento de agentes DRL em cenários com vários veículos autônomos conectados (CAVs), com foco na fusão de dados de seus sensores para localização e identificação de objetos. A estrutura proposta apresenta uma maneira fácil de configurar sessões de treinamento por episódio, com número/modelos customizados de veículos (incluindo seus sensores), pedestres e obstáculos. Ele fornece uma visualização superior do mapa, com informações de alto nível sobre todos os objetos simulados e as principais métricas de treinamento. Também inclui suporte a algoritmos DRL, com métricas integradas e geração de relatórios. Como primeiro estudo de caso, para comprovar as funcionalidades básicas do framework, foram realizadas sessões de treinamento, focadas em sensores relacionados a posição e movimento dos veículos. No entanto, esta estrutura já apresenta as bases para uma futura implementação completa de fusão de sensores de CAYs. Esse modelo treinado poderia então ser implementado na nuvem, proporcionando 0 mapeamento do ambiente com objetos identificados naquela área, atuando como uma percepção coletiva desses veículos.
publishDate 2024
dc.date.none.fl_str_mv 2024-09-18
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.teses.usp.br/teses/disponiveis/3/3142/tde-13022025-103347/
url https://www.teses.usp.br/teses/disponiveis/3/3142/tde-13022025-103347/
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv
dc.rights.driver.fl_str_mv Liberar o conteúdo para acesso público.
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Liberar o conteúdo para acesso público.
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.coverage.none.fl_str_mv
dc.publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
dc.source.none.fl_str_mv
reponame:Biblioteca Digital de Teses e Dissertações da USP
instname:Universidade de São Paulo (USP)
instacron:USP
instname_str Universidade de São Paulo (USP)
instacron_str USP
institution USP
reponame_str Biblioteca Digital de Teses e Dissertações da USP
collection Biblioteca Digital de Teses e Dissertações da USP
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)
repository.mail.fl_str_mv virginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.br
_version_ 1839839144377843712