CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos
| Ano de defesa: | 2024 |
|---|---|
| Autor(a) principal: | |
| Orientador(a): | |
| Banca de defesa: | |
| Tipo de documento: | Dissertação |
| Tipo de acesso: | Acesso aberto |
| Idioma: | por |
| Instituição de defesa: |
Não Informado pela instituição
|
| Programa de Pós-Graduação: |
Não Informado pela instituição
|
| Departamento: |
Não Informado pela instituição
|
| País: |
Não Informado pela instituição
|
| Área do conhecimento CNPq: | |
| Link de acesso: | http://repositorio.ufc.br/handle/riufc/88169 |
Resumo: | Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios. |
| id |
UFC-7_552bd13c73a9fd17d156cb36fd91f099 |
|---|---|
| oai_identifier_str |
oai:repositorio.ufc.br:riufc/88169 |
| network_acronym_str |
UFC-7 |
| network_name_str |
Repositório Institucional da Universidade Federal do Ceará (UFC) |
| repository_id_str |
|
| spelling |
Ferrufino, Paulina Irene VelasquezVeras, Marcelo Bruno de Almeidahttp://lattes.cnpq.br/3227514229866362https://orcid.org/0000-0002-2404-3625http://lattes.cnpq.br/1103039950480887http://lattes.cnpq.br/2445571161029337https://orcid.org/0000-0003-3715-1681Mattos, César Lincoln Cavalcante2026-10-01T16:46:53Z2026-10-01T16:46:53Z2024FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024.http://repositorio.ufc.br/handle/riufc/88169Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios.A detecção de defeitos em pavimentos é essencial para a manutenção rodoviária e a segurança viária, mas a inspeção manual é trabalhosa e suscetível a inconsistências. Embora detectores baseados em aprendizado profundo tenham avançado nessa tarefa, seu desempenho ainda depende de conjuntos de dados rotulados, cuja obtenção é custosa. O Active Learning (AL), busca mitigar essa limitação ao selecionar as amostras não rotuladas mais relevantes para anotação manual. Este trabalho propõe o Clustering in Diversity and Uncertainty (CDU), uma estratégia de AL projetada para melhorar a seleção de amostras em cenários de desbalanceamento de classes, equilibrando a representação dos defeitos por meio de incerteza por classe, agrupamento com Gaussian Mixture Model (GMM), alocação proporcional de Sainte-Laguë e refinamento orientado à diversidade antes da aquisição final guiada por incerteza. Diferentes estratégias de AL foram comparadas usando o You Only Look Once versão 9 (YOLOv9) como detector base, adaptado por transferência de aprendizado, ajuste fino e aumento de dados controlado. A avaliação utilizou 48 vídeos de rodovias do Nordeste do Brasil, com 4.277 imagens extraídas e 670 amostras anotadas manualmente para crack, patch e pothole. A análise de sensibilidade e a validação espaço-temporal apoiaram a seleção de limiares orientados à produção e reduziram falsos positivos transitórios. O CDU alcançou a maior precisão entre as estratégias de AL avaliadas, melhorando a precisão em até 15,1% em comparação com métodos tradicionais, além de atingir a maior Area Under the Curve (AUC), de 0,812. Esses resultados indicam que o CDU pode reduzir o esforço de anotação, mitigar o desbalanceamento entre classes e aprimorar a detecção de defeitos em pavimentos em cenários reais.CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentosCDU: clustering in diversity and uncertainty for active learning in pavement defect detectioninfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisActive LearningYOLODetecção de defeitos em pavimentosActive LearningYOLOPavement defect detectionCNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAOinfo:eu-repo/semantics/openAccessporreponame:Repositório Institucional da Universidade Federal do Ceará (UFC)instname:Universidade Federal do Ceará (UFC)instacron:UFC2026-10-01ORIGINAL2026_dis_pivferrufino.pdf2026_dis_pivferrufino.pdfapplication/pdf27298387http://repositorio.ufc.br/bitstream/riufc/88169/1/2026_dis_pivferrufino.pdf81dfa8750c56c24584336c2be9c65d3fMD51LICENSElicense.txtlicense.txttext/plain; charset=utf-81748http://repositorio.ufc.br/bitstream/riufc/88169/2/license.txt8a4605be74aa9ea9d79846c1fba20a33MD52riufc/881692026-10-01 13:46:54.147oai:repositorio.ufc.br:riufc/88169Tk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=Repositório InstitucionalPUBhttp://www.repositorio.ufc.br/ri-oai/requestbu@ufc.br || repositorio@ufc.bropendoar:2026-10-01T16:46:54Repositório Institucional da Universidade Federal do Ceará (UFC) - Universidade Federal do Ceará (UFC)false |
| dc.title.pt_BR.fl_str_mv |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| dc.title.en.pt_BR.fl_str_mv |
CDU: clustering in diversity and uncertainty for active learning in pavement defect detection |
| title |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| spellingShingle |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos Ferrufino, Paulina Irene Velasquez CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO Active Learning YOLO Detecção de defeitos em pavimentos Active Learning YOLO Pavement defect detection |
| title_short |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| title_full |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| title_fullStr |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| title_full_unstemmed |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| title_sort |
CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos |
| author |
Ferrufino, Paulina Irene Velasquez |
| author_facet |
Ferrufino, Paulina Irene Velasquez |
| author_role |
author |
| dc.contributor.co-advisor.none.fl_str_mv |
Veras, Marcelo Bruno de Almeida |
| dc.contributor.authorLattes.pt_BR.fl_str_mv |
http://lattes.cnpq.br/3227514229866362 |
| dc.contributor.advisorORCID.pt_BR.fl_str_mv |
https://orcid.org/0000-0002-2404-3625 |
| dc.contributor.co-advisorLattes.pt_BR.fl_str_mv |
http://lattes.cnpq.br/1103039950480887 |
| dc.contributor.advisorLattes.pt_BR.fl_str_mv |
http://lattes.cnpq.br/2445571161029337 |
| dc.contributor.authorORCID.pt_BR.fl_str_mv |
https://orcid.org/0000-0003-3715-1681 |
| dc.contributor.author.fl_str_mv |
Ferrufino, Paulina Irene Velasquez |
| dc.contributor.advisor1.fl_str_mv |
Mattos, César Lincoln Cavalcante |
| contributor_str_mv |
Mattos, César Lincoln Cavalcante |
| dc.subject.cnpq.fl_str_mv |
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO |
| topic |
CNPQ::CIENCIAS EXATAS E DA TERRA::CIENCIA DA COMPUTACAO Active Learning YOLO Detecção de defeitos em pavimentos Active Learning YOLO Pavement defect detection |
| dc.subject.ptbr.pt_BR.fl_str_mv |
Active Learning YOLO Detecção de defeitos em pavimentos |
| dc.subject.en.pt_BR.fl_str_mv |
Active Learning YOLO Pavement defect detection |
| description |
Pavement defect detection is essential for road maintenance and traffic safety, but manual inspection is labor-intensive and prone to inconsistencies. Although deep learning detectors have improved this task, their performance still depends on costly labeled datasets. Active Learning (AL) addresses this limitation by selecting the most relevant unlabeled samples for manual annotation. This work proposes Clustering in Diversity and Uncertainty (CDU), an AL strategy designed to improve sample selection under class imbalance by balancing pavement-defect class representation through class-wise uncertainty, Gaussian Mixture Model (GMM) clustering, Sainte-Laguë proportional allocation, and diversity-aware refinement before uncertainty-driven acquisition. Different AL strategies were compared using You Only Look Once version 9 (YOLOv9) as the detector backbone, adapted through transfer learning, fine-tuning, and controlled data augmentation. The evaluation used 48 highway videos from Northeast Brazil, with 4,277 extracted images and 670 manually annotated samples for crack, patch, and pothole. Sensitivity analysis and spatiotemporal validation supported production-oriented threshold selection and reduced transient false positives. CDU achieved the highest precision among the evaluated AL strategies, improving precision by up to 15.1% compared with traditional methods, and reached the highest overall Area Under the Curve (AUC) of 0.812. These results indicate that CDU can reduce annotation effort, mitigate class imbalance, and improve pavement defect detection in real-world scenarios. |
| publishDate |
2024 |
| dc.date.issued.fl_str_mv |
2024 |
| dc.date.accessioned.fl_str_mv |
2026-10-01T16:46:53Z |
| dc.date.available.fl_str_mv |
2026-10-01T16:46:53Z |
| dc.type.status.fl_str_mv |
info:eu-repo/semantics/publishedVersion |
| dc.type.driver.fl_str_mv |
info:eu-repo/semantics/masterThesis |
| format |
masterThesis |
| status_str |
publishedVersion |
| dc.identifier.citation.fl_str_mv |
FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024. |
| dc.identifier.uri.fl_str_mv |
http://repositorio.ufc.br/handle/riufc/88169 |
| identifier_str_mv |
FERRUFINO, Paulina Irene Velasquez. CDU: agrupamento por diversidade e incerteza para aprendizado ativo na detecção de defeitos em pavimentos. 2024. Dissertação (Mestrado em Ciência da Computação) - Universidade Federal do Ceará, Fortaleza, 2024. |
| url |
http://repositorio.ufc.br/handle/riufc/88169 |
| dc.language.iso.fl_str_mv |
por |
| language |
por |
| dc.rights.driver.fl_str_mv |
info:eu-repo/semantics/openAccess |
| eu_rights_str_mv |
openAccess |
| dc.source.none.fl_str_mv |
reponame:Repositório Institucional da Universidade Federal do Ceará (UFC) instname:Universidade Federal do Ceará (UFC) instacron:UFC |
| instname_str |
Universidade Federal do Ceará (UFC) |
| instacron_str |
UFC |
| institution |
UFC |
| reponame_str |
Repositório Institucional da Universidade Federal do Ceará (UFC) |
| collection |
Repositório Institucional da Universidade Federal do Ceará (UFC) |
| bitstream.url.fl_str_mv |
http://repositorio.ufc.br/bitstream/riufc/88169/1/2026_dis_pivferrufino.pdf http://repositorio.ufc.br/bitstream/riufc/88169/2/license.txt |
| bitstream.checksum.fl_str_mv |
81dfa8750c56c24584336c2be9c65d3f 8a4605be74aa9ea9d79846c1fba20a33 |
| bitstream.checksumAlgorithm.fl_str_mv |
MD5 MD5 |
| repository.name.fl_str_mv |
Repositório Institucional da Universidade Federal do Ceará (UFC) - Universidade Federal do Ceará (UFC) |
| repository.mail.fl_str_mv |
bu@ufc.br || repositorio@ufc.br |
| _version_ |
1881776059958951936 |