Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing

Detalhes bibliográficos
Ano de defesa: 2020
Autor(a) principal: Amisse, Caisse, 1982-
Orientador(a): Centeno, Jorge Antonio Silva, 1963-
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Redes neurais (Computação)
Processamento de imagens
Geodésia
Link de acesso: https://hdl.handle.net/1884/71604
Resumo: Orientador: Prof. Dr. Jorge António Silva Centeno
id UFPR_7c855c6e4f778da5bc3b9a26401f8944
oai_identifier_str oai:acervodigital.ufpr.br:1884/71604
network_acronym_str UFPR
network_name_str Repositório Institucional da UFPR
repository_id_str
spelling Amisse, Caisse, 1982-Universidade Federal do Paraná. Setor de Ciências da Terra. Programa de Pós-Graduação em Ciências GeodésicasCenteno, Jorge Antonio Silva, 1963-2021-08-27T19:09:40Z2021-08-27T19:09:40Z2020https://hdl.handle.net/1884/71604Orientador: Prof. Dr. Jorge António Silva CentenoTese (doutorado) - Universidade Federal do Paraná, Setor de Ciências da Terra, Programa de Pós-Graduação em Ciências Geodésicas. Defesa : Curitiba, 17/12/2020Inclui referências: p. 97-107Resumo: O rastreamento de pedestres é uma área de pesquisa bem estabelecido quando realizado em ambiente interno ou quando a câmera é estática. Mas quando a câmera está ativa, como no caso do ambiente externo, uma série de problemas e desafios emergem. Alguns desses desafios dizem respeito a: alterações de iluminação, oclusão, fundo desordenado e movimentos de pedestres. Nesta tese, buscou-se combinar os métodos baseados em aprendizado profundo e técnicas de processamento de imagens para detectar e rastrear pedestres a partir de imagens de alta resolução espacial obtidas em um ambiente externo. O procedimento inicia aplicando redes neurais convolucionais para detectar pedestres a partir de uma série de imagens. Em seguida, um algoritmo de supressão de fundo é proposto para reduzir a influência da mudança de fundo. O método se baseia na segmentação da imagem, na análise da possível pose e em uma etapa de refinamento final baseada no relaxamento probabilístico. Uma vez extraídas as regiões, informação espúria removida e a pose separada, os atributos da pose são derivados e analisados para rastreamento. Portanto, dois conjuntos de imagens estão disponíveis, com e sem supressão do fundo. Esses conjuntos são usados para rastrear pedestres em série de imagens. O rastreamento é formulado como um problema de "matching" de atributos de um pedestre em quadros de imagens subsequentes, criando, portanto, uma correspondência entre pedestres em sequência de imagens. Para tanto, são comparados os histogramas de duas regiões contendo um pedestre em imagens diferentes. Três opções são analisadas: usando a distância euclidiana; usando Dynamic Time Warping e usando a correlação entre histogramas. Os melhores resultados de rastreamento foram obtidos usando a abordagem de correlação, com precisões acima de 80% e é capaz de lidar com problemas de mudanças na aparência (i.e, pose e forma) e oclusões parciais. No entanto, como lidar com oclusões totais, fundo muito desordenado, permanecem um desafio a ser abordado em trabalhos futuros. Palavras-chave: detecção de pedestre; segmentação e rastreamento; modelos deep learning; processamento de imagem; supressão de fundo; relaxamento probabilístico; correspondência de histograma.Abstract: Pedestrian tracking is a well-established research field when it is performed in an indoor environment or the camera is static. But when the camera is moving, as in the case of the outdoor environment, there are many open issues to be solved. Some of these issues concern: illumination changes, occlusion, cluttered background, and pedestrian movements. In this thesis, deep learning-based methods and image processing technique frameworks are combined to detect and track pedestrians from high spatial resolution images obtained in an outdoor environment. The framework starts by applying deep convolutional neural networks to detect pedestrians from a series of image frames. Then a background suppression algorithm is proposed to reduce the influence of the changing background. The method is based on image segmentation, the analysis of the possible pose, and a final refinement step based on probabilistic relaxation. Once the regions are extracted spurious information is removed and the human figure is separated from the background, feature blobs from the human figures are derived. So, two sets of images are available, with and without background suppression. These sets are used to track the pedestrian in the image series. The tracking approach matches the extracted features of an individual pedestrian in subsequent frames, hence creating a correspondence of targets across multiple image frames. For this purpose, the histograms of two regions containing a pedestrian in different images are compared. Three options are compared: using the Euclidean Distance; using Dynamic Time Warping (DTW) and using the correlation between histograms. The best tracking results were obtained using the correlation approach, with accuracies above 80%, and addresses the problem of changes in appearance (i.e., pose and shape) and partial occlusions. However, full occlusions, more cluttered scenarios, remains a challenge to be addressed for future work. Keywords: pedestrian detection, segmentation and tracking; deep learning models; image processing; background suppression; probabilistic relaxation; histogram matching1 arquivo (107 p.) : il. (algumas color.).application/pdfRedes neurais (Computação)Processamento de imagensGeodésiaPedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processinginfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisengreponame:Repositório Institucional da UFPRinstname:Universidade Federal do Paraná (UFPR)instacron:UFPRinfo:eu-repo/semantics/openAccessORIGINALR - T - CAISSE AMISSE.pdfapplication/pdf4828109https://acervodigital.ufpr.br/bitstream/1884/71604/1/R%20-%20T%20-%20CAISSE%20AMISSE.pdf020627b37fd319b4697fb8ca0f39aab3MD51open access1884/716042021-08-27 16:09:40.346open accessoai:acervodigital.ufpr.br:1884/71604Repositório InstitucionalPUBhttp://acervodigital.ufpr.br/oai/requestinformacaodigital@ufpr.bropendoar:3082021-08-27T19:09:40Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)false
dc.title.pt_BR.fl_str_mv Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
title Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
spellingShingle Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
Amisse, Caisse, 1982-
Redes neurais (Computação)
Processamento de imagens
Geodésia
title_short Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
title_full Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
title_fullStr Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
title_full_unstemmed Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
title_sort Pedestrian detection and monitoring with high spatial resolution images using convolutional neural networks and image processing
author Amisse, Caisse, 1982-
author_facet Amisse, Caisse, 1982-
author_role author
dc.contributor.other.pt_BR.fl_str_mv Universidade Federal do Paraná. Setor de Ciências da Terra. Programa de Pós-Graduação em Ciências Geodésicas
dc.contributor.author.fl_str_mv Amisse, Caisse, 1982-
dc.contributor.advisor1.fl_str_mv Centeno, Jorge Antonio Silva, 1963-
contributor_str_mv Centeno, Jorge Antonio Silva, 1963-
dc.subject.por.fl_str_mv Redes neurais (Computação)
Processamento de imagens
Geodésia
topic Redes neurais (Computação)
Processamento de imagens
Geodésia
description Orientador: Prof. Dr. Jorge António Silva Centeno
publishDate 2020
dc.date.issued.fl_str_mv 2020
dc.date.accessioned.fl_str_mv 2021-08-27T19:09:40Z
dc.date.available.fl_str_mv 2021-08-27T19:09:40Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://hdl.handle.net/1884/71604
url https://hdl.handle.net/1884/71604
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 1 arquivo (107 p.) : il. (algumas color.).
application/pdf
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFPR
instname:Universidade Federal do Paraná (UFPR)
instacron:UFPR
instname_str Universidade Federal do Paraná (UFPR)
instacron_str UFPR
institution UFPR
reponame_str Repositório Institucional da UFPR
collection Repositório Institucional da UFPR
bitstream.url.fl_str_mv https://acervodigital.ufpr.br/bitstream/1884/71604/1/R%20-%20T%20-%20CAISSE%20AMISSE.pdf
bitstream.checksum.fl_str_mv 020627b37fd319b4697fb8ca0f39aab3
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositório Institucional da UFPR - Universidade Federal do Paraná (UFPR)
repository.mail.fl_str_mv informacaodigital@ufpr.br
_version_ 1847526200626380800

Registros relacionados