Airport runway detection using convolutional neural networks

Detalhes bibliográficos
Ano de defesa: 2022
Autor(a) principal: Lima, Victor André
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Instituto Tecnológico da Aeronáutica (ITA)
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://www.repositorio.mar.mil.br/handle/ripcmb/845799
Resumo: Os recentes avanços em poder computacional permitiram ao mundo o uso mais extensivo de algoritmos de aprendizado profundo. O processamento de imagens em si é uma tarefa que exige grandes quantidade de dados, mas se demonstrou de extrema importância em muitos campos de conhecimento. Neste trabalho, um método de detecção de pista de pouso para aeronaves durante a fase de pouso, baseado em rede neurais convolucionais, é proposto com o objetivo de reduzir a carga de trabalho do piloto, aumentar segurança de voo durante pouso, e dar novos passos em direção a voos comerciais de piloto único ou até autônomos. Os resultados mostram que a rede neural pôde convergir suas funções de perda nos dados de treino e de validação com sucesso, e a inferência em imagens dos dados de teste e imagens reais produziu resultados satisfatórios para keypoints e bouding box. Os resultados numéricos indicam que imagens virtuais de pistas de pouso podem ser utilizadas para pré-treinar uma rede a fim de detectar pistas de pouso em imagens reais, então o trabalho contribui para uma abordagem mais barato e rápida para desenvolvimento de tal tecnologia. Análises nas estimativas para pose da câmera obtidas pelos keypoints inferidos indicam que o projeto é promissor sendo que, mesmo sendo um trabalho inicial, os resultados proveram histogramas de erros que podem facilmente ser controlado pelo uso de filtros para remover outliers e pela fusão de dados com outros sensores em aplicações reais. Em suma, contribui-se com resultados indicativos de que o treinamento virtual, com uso de técnicas de aumento de dados para enriquecimento do banco de imagens, beneficias a detecção em imagens reais e que os keypoints inferidos podem ser usados em conjunto a algoritmos para estimar pose a fim de estimar a pode aeronaves em relação à pista de pouso.
id MB_4765063a634fcc31b6430f3ccc5b03bb
oai_identifier_str oai:www.repositorio.mar.mil.br:ripcmb/845799
network_acronym_str MB
network_name_str Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
repository_id_str
spelling Airport runway detection using convolutional neural networksRedes neuraisProcessamento de imagensPistas de pouso e decolagensSimulação computadorizadaBanco de dados de imagensSegurança de vooAeronáuticaOs recentes avanços em poder computacional permitiram ao mundo o uso mais extensivo de algoritmos de aprendizado profundo. O processamento de imagens em si é uma tarefa que exige grandes quantidade de dados, mas se demonstrou de extrema importância em muitos campos de conhecimento. Neste trabalho, um método de detecção de pista de pouso para aeronaves durante a fase de pouso, baseado em rede neurais convolucionais, é proposto com o objetivo de reduzir a carga de trabalho do piloto, aumentar segurança de voo durante pouso, e dar novos passos em direção a voos comerciais de piloto único ou até autônomos. Os resultados mostram que a rede neural pôde convergir suas funções de perda nos dados de treino e de validação com sucesso, e a inferência em imagens dos dados de teste e imagens reais produziu resultados satisfatórios para keypoints e bouding box. Os resultados numéricos indicam que imagens virtuais de pistas de pouso podem ser utilizadas para pré-treinar uma rede a fim de detectar pistas de pouso em imagens reais, então o trabalho contribui para uma abordagem mais barato e rápida para desenvolvimento de tal tecnologia. Análises nas estimativas para pose da câmera obtidas pelos keypoints inferidos indicam que o projeto é promissor sendo que, mesmo sendo um trabalho inicial, os resultados proveram histogramas de erros que podem facilmente ser controlado pelo uso de filtros para remover outliers e pela fusão de dados com outros sensores em aplicações reais. Em suma, contribui-se com resultados indicativos de que o treinamento virtual, com uso de técnicas de aumento de dados para enriquecimento do banco de imagens, beneficias a detecção em imagens reais e que os keypoints inferidos podem ser usados em conjunto a algoritmos para estimar pose a fim de estimar a pode aeronaves em relação à pista de pouso.The recent advancement in computational power allowed the world to give more use of deep learning algorithms. The image processing task is on itself data-hungry, but showed to be of exetreme importance in many fields of knowledge. In this work, a runway detection method, for aircraft during landing phase, based on convolutional neural network is made with the motivation to reduce pilot workload, increase flight safety during landing and take new steps towards single-piloted or even unmanned commercial flights. With the results, the network could successsfully converge its loss function on the training dataset and alidation dataset, and inference on severeal images from test dataset and real runway images gave good results for keypoint and bounding boxes predictions. Our numerical results indicate that virtual runway images can be used in order to pretrain a netwaork to detect real runway images, so we contribute to a chearper and faster approach on the development of suck technology. Further analysis on estimatives for orientation and position of the aircraft camera from predicted keypoint indicate the work to be promising. Even being an initial work, the results gave a robust error histogram which could be easyly controlled by filtering outliers and by data fusion with other sensors in real application. Overall, we contribute with results indicating that virtual training, using data augmentation methods for dataset enrichment, benefits real detection and that the keypoint predictions may be used together with pose estimation algorithm to give estimates of aircraft pose related to runway.Instituto Tecnológico da Aeronáutica (ITA)Maximo, Marcos Ricardo Omena de AlbuquerqueSêcco, Ney RafaelMoscati, Ney RicardoLima, Victor André2023-01-26T13:58:08Z2023-01-26T13:58:08Z2022info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisapplication/pdfhttps://www.repositorio.mar.mil.br/handle/ripcmb/845799info:eu-repo/semantics/openAccessporreponame:Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)instname:Marinha do Brasil (MB)instacron:MB2023-01-26T14:15:07Zoai:www.repositorio.mar.mil.br:ripcmb/845799Repositório InstitucionalPUBhttps://www.repositorio.mar.mil.br/oai/requestdphdm.repositorio@marinha.mil.bropendoar:2023-01-26T14:15:07Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB) - Marinha do Brasil (MB)false
dc.title.none.fl_str_mv Airport runway detection using convolutional neural networks
title Airport runway detection using convolutional neural networks
spellingShingle Airport runway detection using convolutional neural networks
Lima, Victor André
Redes neurais
Processamento de imagens
Pistas de pouso e decolagens
Simulação computadorizada
Banco de dados de imagens
Segurança de voo
Aeronáutica
title_short Airport runway detection using convolutional neural networks
title_full Airport runway detection using convolutional neural networks
title_fullStr Airport runway detection using convolutional neural networks
title_full_unstemmed Airport runway detection using convolutional neural networks
title_sort Airport runway detection using convolutional neural networks
author Lima, Victor André
author_facet Lima, Victor André
author_role author
dc.contributor.none.fl_str_mv Maximo, Marcos Ricardo Omena de Albuquerque
Sêcco, Ney Rafael
Moscati, Ney Ricardo
dc.contributor.author.fl_str_mv Lima, Victor André
dc.subject.por.fl_str_mv Redes neurais
Processamento de imagens
Pistas de pouso e decolagens
Simulação computadorizada
Banco de dados de imagens
Segurança de voo
Aeronáutica
topic Redes neurais
Processamento de imagens
Pistas de pouso e decolagens
Simulação computadorizada
Banco de dados de imagens
Segurança de voo
Aeronáutica
description Os recentes avanços em poder computacional permitiram ao mundo o uso mais extensivo de algoritmos de aprendizado profundo. O processamento de imagens em si é uma tarefa que exige grandes quantidade de dados, mas se demonstrou de extrema importância em muitos campos de conhecimento. Neste trabalho, um método de detecção de pista de pouso para aeronaves durante a fase de pouso, baseado em rede neurais convolucionais, é proposto com o objetivo de reduzir a carga de trabalho do piloto, aumentar segurança de voo durante pouso, e dar novos passos em direção a voos comerciais de piloto único ou até autônomos. Os resultados mostram que a rede neural pôde convergir suas funções de perda nos dados de treino e de validação com sucesso, e a inferência em imagens dos dados de teste e imagens reais produziu resultados satisfatórios para keypoints e bouding box. Os resultados numéricos indicam que imagens virtuais de pistas de pouso podem ser utilizadas para pré-treinar uma rede a fim de detectar pistas de pouso em imagens reais, então o trabalho contribui para uma abordagem mais barato e rápida para desenvolvimento de tal tecnologia. Análises nas estimativas para pose da câmera obtidas pelos keypoints inferidos indicam que o projeto é promissor sendo que, mesmo sendo um trabalho inicial, os resultados proveram histogramas de erros que podem facilmente ser controlado pelo uso de filtros para remover outliers e pela fusão de dados com outros sensores em aplicações reais. Em suma, contribui-se com resultados indicativos de que o treinamento virtual, com uso de técnicas de aumento de dados para enriquecimento do banco de imagens, beneficias a detecção em imagens reais e que os keypoints inferidos podem ser usados em conjunto a algoritmos para estimar pose a fim de estimar a pode aeronaves em relação à pista de pouso.
publishDate 2022
dc.date.none.fl_str_mv 2022
2023-01-26T13:58:08Z
2023-01-26T13:58:08Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://www.repositorio.mar.mil.br/handle/ripcmb/845799
url https://www.repositorio.mar.mil.br/handle/ripcmb/845799
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Instituto Tecnológico da Aeronáutica (ITA)
publisher.none.fl_str_mv Instituto Tecnológico da Aeronáutica (ITA)
dc.source.none.fl_str_mv reponame:Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
instname:Marinha do Brasil (MB)
instacron:MB
instname_str Marinha do Brasil (MB)
instacron_str MB
institution MB
reponame_str Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
collection Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB)
repository.name.fl_str_mv Repositório Institucional da Produção Científica da Marinha do Brasil (RI-MB) - Marinha do Brasil (MB)
repository.mail.fl_str_mv dphdm.repositorio@marinha.mil.br
_version_ 1855762813615603712