CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos

Detalhes bibliográficos
Ano de defesa: 2024
Autor(a) principal: Ferrufino, Paulina Irene Velasquez
Orientador(a): Mattos, César Lincoln Cavalcante
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Área do conhecimento CNPq:
Link de acesso: http://repositorio.ufc.br/handle/riufc/88169
Resumo: Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios.
id UFC-7_552bd13c73a9fd17d156cb36fd91f099
oai_identifier_str oai:repositorio.ufc.br:riufc/88169
network_acronym_str UFC-7
network_name_str Repositório Institucional da Universidade Federal do Ceará (UFC)
repository_id_str
spelling Ferrufino, Paulina Irene VelasquezVeras, Marcelo Bruno de Almeidahttp://lattes.cnpq.br/3227514229866362https://orcid.org/0000-0002-2404-3625http://lattes.cnpq.br/1103039950480887http://lattes.cnpq.br/2445571161029337https://orcid.org/0000-0003-3715-1681Mattos, César Lincoln Cavalcante2026-10-01T16:46:53Z2026-10-01T16:46:53Z2024FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024.http://repositorio.ufc.br/handle/riufc/88169Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios.A detecção de defeitos em pavimentos é essencial para a manutenção rodoviária e a segurança viária, mas a inspeção manual é trabalhosa e suscetível a inconsistências. Embora detectores baseados em aprendizado profundo tenham avançado nessa tarefa, seu desempenho ainda depende de conjuntos de dados rotulados, cuja obtenção é custosa. O Active Learning (AL), busca mitigar essa limitação ao selecionar as amostras não rotuladas mais relevantes para anotação manual. Este trabalho propõe o Clustering in Diversity and Uncertainty (CDU), uma estratégia de AL projetada para melhorar a seleção de amostras em cenários de desbalanceamento de classes, equilibrando a representação dos defeitos por meio de incerteza por classe, agrupamento com Gaussian Mixture Model (GMM), alocação proporcional de Sainte-Laguë e refinamento orientado à diversidade antes da aquisição final guiada por incerteza. Diferentes estratégias de AL foram comparadas usando o You Only Look Once versão 9 (YOLOv9) como detector base, adaptado por transferência de aprendizado, ajuste fino e aumento de dados controlado. A avaliação utilizou 48 vídeos de rodovias do Nordeste do Brasil, com 4.277 imagens extraídas e 670 amostras anotadas manualmente para crack, patch e pothole. A análise de sensibilidade e a validação espaço-temporal apoiaram a seleção de limiares orientados à produção e reduziram falsos positivos transitórios. O CDU alcançou a maior precisão entre as estratégias de AL avaliadas, melhorando a precisão em até 15,1% em comparação com métodos tradicionais, além de atingir a maior Area Under the Curve (AUC), de 0,812. Esses resultados indicam que o CDU pode reduzir o esforço de anotação, mitigar o desbalanceamento entre classes e aprimorar a detecção de defeitos em pavimentos em cenários reais.CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentosCDU: clustering in diversity and uncertainty for active learning in pavement defect detectioninfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisActive LearningYOLODetecção de defeitos em pavimentosActive LearningYOLOPavement defect detectionCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOinfo:eu-repo/semantics/openAccessporreponame:Repositório Institucional da Universidade Federal do Ceará (UFC)instname:Universidade Federal do Ceará (UFC)instacron:UFC2026-10-01ORIGINAL2026_dis_pivferrufino.pdf2026_dis_pivferrufino.pdfapplication/pdf27298387http://repositorio.ufc.br/bitstream/riufc/88169/1/2026_dis_pivferrufino.pdf81dfa8750c56c24584336c2be9c65d3fMD51LICENSElicense.txtlicense.txttext/plain; charset=utf-81748http://repositorio.ufc.br/bitstream/riufc/88169/2/license.txt8a4605be74aa9ea9d79846c1fba20a33MD52riufc/881692026-10-01 13:46:54.147oai:repositorio.ufc.br:riufc/88169Tk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=Repositório InstitucionalPUBhttp://www.repositorio.ufc.br/ri-oai/requestbu@ufc.br || repositorio@ufc.bropendoar:2026-10-01T16:46:54Repositório Institucional da Universidade Federal do Ceará (UFC) - Universidade Federal do Ceará (UFC)false
dc.title.pt_BR.fl_str_mv CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
dc.title.en.pt_BR.fl_str_mv CDU: clustering in diversity and uncertainty for active learning in pavement defect detection
title CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
spellingShingle CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
Ferrufino, Paulina Irene Velasquez
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
Active Learning
YOLO
Detecção de defeitos em pavimentos
Active Learning
YOLO
Pavement defect detection
title_short CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
title_full CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
title_fullStr CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
title_full_unstemmed CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
title_sort CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
author Ferrufino, Paulina Irene Velasquez
author_facet Ferrufino, Paulina Irene Velasquez
author_role author
dc.contributor.co-advisor.none.fl_str_mv Veras, Marcelo Bruno de Almeida
dc.contributor.authorLattes.pt_BR.fl_str_mv http://lattes.cnpq.br/3227514229866362
dc.contributor.advisorORCID.pt_BR.fl_str_mv https://orcid.org/0000-0002-2404-3625
dc.contributor.co-advisorLattes.pt_BR.fl_str_mv http://lattes.cnpq.br/1103039950480887
dc.contributor.advisorLattes.pt_BR.fl_str_mv http://lattes.cnpq.br/2445571161029337
dc.contributor.authorORCID.pt_BR.fl_str_mv https://orcid.org/0000-0003-3715-1681
dc.contributor.author.fl_str_mv Ferrufino, Paulina Irene Velasquez
dc.contributor.advisor1.fl_str_mv Mattos, César Lincoln Cavalcante
contributor_str_mv Mattos, César Lincoln Cavalcante
dc.subject.cnpq.fl_str_mv CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
topic CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO
Active Learning
YOLO
Detecção de defeitos em pavimentos
Active Learning
YOLO
Pavement defect detection
dc.subject.ptbr.pt_BR.fl_str_mv Active Learning
YOLO
Detecção de defeitos em pavimentos
dc.subject.en.pt_BR.fl_str_mv Active Learning
YOLO
Pavement defect detection
description Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios.
publishDate 2024
dc.date.issued.fl_str_mv 2024
dc.date.accessioned.fl_str_mv 2026-10-01T16:46:53Z
dc.date.available.fl_str_mv 2026-10-01T16:46:53Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024.
dc.identifier.uri.fl_str_mv http://repositorio.ufc.br/handle/riufc/88169
identifier_str_mv FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024.
url http://repositorio.ufc.br/handle/riufc/88169
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.source.none.fl_str_mv reponame:Repositório Institucional da Universidade Federal do Ceará (UFC)
instname:Universidade Federal do Ceará (UFC)
instacron:UFC
instname_str Universidade Federal do Ceará (UFC)
instacron_str UFC
institution UFC
reponame_str Repositório Institucional da Universidade Federal do Ceará (UFC)
collection Repositório Institucional da Universidade Federal do Ceará (UFC)
bitstream.url.fl_str_mv http://repositorio.ufc.br/bitstream/riufc/88169/1/2026_dis_pivferrufino.pdf
http://repositorio.ufc.br/bitstream/riufc/88169/2/license.txt
bitstream.checksum.fl_str_mv 81dfa8750c56c24584336c2be9c65d3f
8a4605be74aa9ea9d79846c1fba20a33
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Repositório Institucional da Universidade Federal do Ceará (UFC) - Universidade Federal do Ceará (UFC)
repository.mail.fl_str_mv bu@ufc.br || repositorio@ufc.br
_version_ 1881776059958951936