Diabetic retinopathy detection based on deep learning

Detalhes bibliográficos
Ano de defesa: 2019
Autor(a) principal: Zago, Gabriel Tozatto
Orientador(a): Andreão, Rodrigo Varejão
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: eng
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://repositorio.ifes.edu.br/handle/123456789/543
Resumo: RESUMO: A detecção precoce de retinopatia diabética (RD) é essencial, pois o tratamento oportuno pode reduzir ou até impedir a perda da visão. Além disso, a localização automática das regiões da imagem da retina que podem conter lesões pode auxiliar os especialistas na tarefa de detecção da doença. Ao mesmo tempo, imagens de baixa qualidade não permitem um diagnóstico médico preciso e causam o inconveniente de o paciente ter de retornar ao centro médico para repetir o exame de fundo do olho. Nesta tese, argumentamos que é possível propor um sistema com base na avaliação da qualidade da imagem e na localização de lesões vermelhas para detectar automaticamente RD com desempenho semelhante ao de especialistas, considerando que uma segmentação aproximada é suficiente para produzir um marcador discriminante de uma lesão. Um sistema automático robusto é proposto para avaliar a qualidade das imagens de retina visando auxiliar os profissionais de saúde durante um exame de fundo de olho. Propomos uma rede neural convolucional (CNN) pré-treinada em imagens não médicas para extrair características gerais de imagem. Os pesos da CNN são ajustados através de um procedimento de ajuste fino, resultando em um classificador de bom desempenho ajustado com uma pequena quantidade de imagens rotuladas. Também projetamos um modelo de localização de lesões usando uma abordagem de aprendizado profundo baseada em regiões. Nosso objetivo é reduzir a complexidade do modelo e melhorar seu desempenho. Para esse fim, desenvolvemos um procedimento (incluindo dois modelos de redes neurais convolucionais) para selecionar as regiões utilizadas no treinamento, de modo que os exemplos desafiadores recebessem atenção especial durante o processo de treinamento. Usando anotações de região, uma predição de RD pode ser definida na imagem inicial, sem a necessidade de treinamento especial. Nossa abordagem baseada em região permite que o modelo seja treinado com apenas 28 imagens, resultando em desempenho semelhante a trabalhos que usaram mais de um milhão de imagens rotuladas. O desempenho da CNN para avaliação da qualidade foi medido através de dois bancos de dados publicamente disponíveis (DRIMDB e ELSA-Brasil) usando dois procedimentos diferentes: validação cruzada intra-banco de dados e inter-banco de dados. A CNN alcançou uma área sob a curvacar a cterística de operação do receptor(AUC) de 99,98% no DRIMDB e uma AUC de 98,56% no ELSA-Brasil no experimento inter-bancos (ou seja, com treinamento e testes não realizados no mesmo conjunto de dados). Esses resultados mostram a robustez do modelo proposto para vários dispositivos de aquisição de imagens sem a necessidade de adaptação especial, tornando-o um bom candidato para uso em cenários operacionais. O modelo de localização da lesão foi treinado no banco de dados de Retinopatia Diabética Padrão, Nível de Calibração 1 (DIARETDB1) e testado em vários bancos de dados (incluindo Messidor) sem qualquer adaptação adicional. Alcançou uma AUC de 0,912 -95%IC0,897-0,928 para a triagem de RD e uma sensibilidade de 0,940-95% CI 0,921-0,959. Esses valores são similares a outras abordagens do estado da arte. Os resultados sugerem que a hipótese da proposta é confirmada.
id IFES-2_b4b99dbada52bf18f3c84eda28451bdd
oai_identifier_str oai:repositorio.ifes.edu.br:123456789/543
network_acronym_str IFES-2
network_name_str Repositório Institucional do IFES
repository_id_str
spelling Zago, Gabriel TozattoUniversidade Federal do Espírito Santo (Ufes)Télécom SudParisConci, AuraFernandes, Mariana RampinelliRauber, Thomas WalterCiarelli, Patrick MarquesAndreão, Rodrigo VarejãoSalles, Evandro Ottoni Teatini2020-03-16T18:02:19Z2020-03-16T18:02:19Z2019Zago, G. T. Diabetic retinopathy detection based on deep learning. 2019. 96 f. Tese (Doutorado em Engenharia Elétrica) - Centro Tecnológico, Universidade Federal do Espírito Santo, Vitória, 2019.https://repositorio.ifes.edu.br/handle/123456789/54330001013004P0RESUMO: A detecção precoce de retinopatia diabética (RD) é essencial, pois o tratamento oportuno pode reduzir ou até impedir a perda da visão. Além disso, a localização automática das regiões da imagem da retina que podem conter lesões pode auxiliar os especialistas na tarefa de detecção da doença. Ao mesmo tempo, imagens de baixa qualidade não permitem um diagnóstico médico preciso e causam o inconveniente de o paciente ter de retornar ao centro médico para repetir o exame de fundo do olho. Nesta tese, argumentamos que é possível propor um sistema com base na avaliação da qualidade da imagem e na localização de lesões vermelhas para detectar automaticamente RD com desempenho semelhante ao de especialistas, considerando que uma segmentação aproximada é suficiente para produzir um marcador discriminante de uma lesão. Um sistema automático robusto é proposto para avaliar a qualidade das imagens de retina visando auxiliar os profissionais de saúde durante um exame de fundo de olho. Propomos uma rede neural convolucional (CNN) pré-treinada em imagens não médicas para extrair características gerais de imagem. Os pesos da CNN são ajustados através de um procedimento de ajuste fino, resultando em um classificador de bom desempenho ajustado com uma pequena quantidade de imagens rotuladas. Também projetamos um modelo de localização de lesões usando uma abordagem de aprendizado profundo baseada em regiões. Nosso objetivo é reduzir a complexidade do modelo e melhorar seu desempenho. Para esse fim, desenvolvemos um procedimento (incluindo dois modelos de redes neurais convolucionais) para selecionar as regiões utilizadas no treinamento, de modo que os exemplos desafiadores recebessem atenção especial durante o processo de treinamento. Usando anotações de região, uma predição de RD pode ser definida na imagem inicial, sem a necessidade de treinamento especial. Nossa abordagem baseada em região permite que o modelo seja treinado com apenas 28 imagens, resultando em desempenho semelhante a trabalhos que usaram mais de um milhão de imagens rotuladas. O desempenho da CNN para avaliação da qualidade foi medido através de dois bancos de dados publicamente disponíveis (DRIMDB e ELSA-Brasil) usando dois procedimentos diferentes: validação cruzada intra-banco de dados e inter-banco de dados. A CNN alcançou uma área sob a curvacar a cterística de operação do receptor(AUC) de 99,98% no DRIMDB e uma AUC de 98,56% no ELSA-Brasil no experimento inter-bancos (ou seja, com treinamento e testes não realizados no mesmo conjunto de dados). Esses resultados mostram a robustez do modelo proposto para vários dispositivos de aquisição de imagens sem a necessidade de adaptação especial, tornando-o um bom candidato para uso em cenários operacionais. O modelo de localização da lesão foi treinado no banco de dados de Retinopatia Diabética Padrão, Nível de Calibração 1 (DIARETDB1) e testado em vários bancos de dados (incluindo Messidor) sem qualquer adaptação adicional. Alcançou uma AUC de 0,912 -95%IC0,897-0,928 para a triagem de RD e uma sensibilidade de 0,940-95% CI 0,921-0,959. Esses valores são similares a outras abordagens do estado da arte. Os resultados sugerem que a hipótese da proposta é confirmada.ABSTRACT: Detecting the early signs of diabetic retinopathy (DR) is essential, as timely treatment might reduce or even prevent vision loss. Moreover, automatically localizing the regions of the retinal image that might contain lesions can favorably assist specialists in the task of detection.At the same time, poor-quality retinal images do not allow an accurate medical diagnosis, and it is inconvenient for a patient to return to a medical center to repeat the fundus photography exam. In this thesis,we argue that it is possible to propose a pipeline based on quality assessment and red lesion localization to achieve automatic DR detection with performance similar to experts considering that a rough segmentation is sufficient to produce a discriminant marker of a lesion.Arobust automatic system is proposed to assess the quality of retinal images aiming at assisting health care professionals during a fundus photograph exam. We propose a convolutional neural network (CNN) pretrained on non-medical images for extracting general image features. The weights of the CNN are further adjusted via a fine-tuning procedure, resulting in a performant classifier usingonly with a small quantity of labeled images.We also designed a lesion localization model using a deep network patch-based approach.Our goal was to reduce the complexity of the implementationwhile improving its performance. For this purpose, we designed an efficient procedure (including two convolutional neural network models) for selecting the training patches, such that the challenging examples would be given special attention during the training process. Using the labeling of the region, a DR decision can be given to the initial image, without the need for special training.Our patch-based approach allows the model to be trained with only 28 imagesachievingsimilar results toworks that used over a million of labeled images.The CNN performancefor quality assessmentwas evaluated on two publicly available databases (i.e., DRIMDB and ELSA-Brasil) using two different procedures: intra-database and inter-database cross-validation. The CNN achievesan area under thereceiver operating characteristiccurve (AUC) of 99.98%on DRIMDB and an AUC of 98.56% on ELSA-Brasil in the inter-database experiment, where training and testing were not performed on the same database. These results suggestthe robustness of the proposed model to various image acquisitions without requiring special adaptation, thus making it a good candidate for use in operational clinical scenarios. Thelesion localization model wastrained on the Standard Diabetic Retinopathy Database, Calibration Level 1 (DIARETDB1) database and wastested on several databases (including Messidor) without any further adaptation. It reaches an area under the receiver operating characteristic curve of 0.912 -95%CI0.897-0.928 for DR screening, and a sensitivity of 0.940-95%CI0.921-0.959. These values are competitive with other state-of-the-art approaches.The results suggest that the given hypothesis is confirmed.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes)Campus Serra96 f. : il.Retina - DoençasAprendizado do computadorRedes neurais (Computação)RetinaProcessamento de imagensDiabetic retinopathy detection based on deep learninginfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisinfo:eu-repo/semantics/openAccessengreponame:Repositório Institucional do IFESinstname:Instituto Federal de Educação, Ciência e Tecnologia do Espírito Santo (IFES)instacron:IFEShttp://lattes.cnpq.br/8771088249434104https://orcid.org/0000-0003-2228-6751ORIGINALTESE_Diabetic_retinopathy_detection.pdfTESE_Diabetic_retinopathy_detection.pdfapplication/pdf1988015https://repositorio.ifes.edu.br/bitstreams/2b712529-f375-4256-b286-a532276fdf67/download7a00beea5f62bb5459a47014394cd0ddMD51trueAnonymousREADLICENSElicense.txtlicense.txttext/plain; charset=utf-8934https://repositorio.ifes.edu.br/bitstreams/d5063fe6-e3fd-437f-9ad1-38a54f8208e3/downloadac7cb971050ed632be934da23d966924MD52falseAnonymousREADTEXTTESE_Diabetic_retinopathy_detection.pdf.txtTESE_Diabetic_retinopathy_detection.pdf.txtExtracted texttext/plain147222https://repositorio.ifes.edu.br/bitstreams/b2b51d30-21f2-4224-8911-39f73d99cc99/downloadb17a92547c0d9ebd6596159fe88d62cdMD53falseAnonymousREADTHUMBNAILTESE_Diabetic_retinopathy_detection.pdf.jpgTESE_Diabetic_retinopathy_detection.pdf.jpgGenerated Thumbnailimage/jpeg2129https://repositorio.ifes.edu.br/bitstreams/0be46c2a-a403-48a4-be30-087bb038f6c1/downloade46daee4ea5205c183f3442077d84331MD54falseAnonymousREAD123456789/5432025-07-30T21:53:45.990Zopen.accessoai:repositorio.ifes.edu.br:123456789/543https://repositorio.ifes.edu.brRepositório InstitucionalPUBhttps://repositorio.ifes.edu.br/server/oai/requestrepositorio@ifes.edu.bropendoar:2025-07-30T21:53:45Repositório Institucional do IFES - Instituto Federal de Educação, Ciência e Tecnologia do Espírito Santo (IFES)falseQXV0b3JlcyBxdWUgc3VibWV0ZW0gYSBlc3RhIGNvbmZlcsOqbmNpYSBjb25jb3JkYW0gY29tIG9zIHNlZ3VpbnRlcyB0ZXJtb3M6CmEpIEF1dG9yZXMgbWFudMOpbSBvcyBkaXJlaXRvcyBhdXRvcmFpcyBzb2JyZSBvIHRyYWJhbGhvLCBwZXJtaXRpbmRvIMOgIGNvbmZlcsOqbmNpYSBjb2xvY8OhLWxvIHNvYiB1bWEgbGljZW7Dp2EgTGljZW7Dp2EgQ3JlYXRpdmUgQ29tbW9ucyBBdHRyaWJ1dGlvbiwgcXVlIHBlcm1pdGUgbGl2cmVtZW50ZSBhIG91dHJvcyBhY2Vzc2FyLCB1c2FyIGUgY29tcGFydGlsaGFyIG8gdHJhYmFsaG8gY29tIG8gY3LDqWRpdG8gZGUgYXV0b3JpYSBlIGFwcmVzZW50YcOnw6NvIGluaWNpYWwgbmVzdGEgY29uZmVyw6puY2lhLgpiKSBBdXRvcmVzIHBvZGVtIGFicmlyIG3Do28gZG9zIHRlcm1vcyBkYSBsaWNlbsOnYSBDQyBlIGRlZmluaXIgY29udHJhdG9zIGFkaWNpb25haXMgcGFyYSBhIGRpc3RyaWJ1acOnw6NvIG7Do28tZXhjbHVzaXZhIGUgc3Vic2Vxw7xlbnRlIHB1YmxpY2HDp8OjbyBkZXN0ZSB0cmFiYWxobyAoZXguOiBwdWJsaWNhciB1bWEgdmVyc8OjbyBhdHVhbGl6YWRhIGVtIHVtIHBlcmnDs2RpY28sIGRpc3BvbmliaWxpemFyIGVtIHJlcG9zaXTDs3JpbyBpbnN0aXR1Y2lvbmFsLCBvdSBwdWJsaWPDoS1sbyBlbSBsaXZybyksIGNvbSBvIGNyw6lkaXRvIGRlIGF1dG9yaWEgZSBhcHJlc2VudGHDp8OjbyBpbmljaWFsIG5lc3RhIGNvbmZlcsOqbmNpYS4KYykgQWzDqW0gZGlzc28sIGF1dG9yZXMgc8OjbyBpbmNlbnRpdmFkb3MgYSBwdWJsaWNhciBlIGNvbXBhcnRpbGhhciBzZXVzIHRyYWJhbGhvcyBvbmxpbmUgKGV4LjogZW0gcmVwb3NpdMOzcmlvIGluc3RpdHVjaW9uYWwgb3UgZW0gc3VhIHDDoWdpbmEgcGVzc29hbCkgYSBxdWFscXVlciBtb21lbnRvIGFudGVzIGUgZGVwb2lzIGRhIGNvbmZlcsOqCg==
dc.title.pt_BR.fl_str_mv Diabetic retinopathy detection based on deep learning
title Diabetic retinopathy detection based on deep learning
spellingShingle Diabetic retinopathy detection based on deep learning
Zago, Gabriel Tozatto
Retina - Doenças
Aprendizado do computador
Redes neurais (Computação)
Retina
Processamento de imagens
title_short Diabetic retinopathy detection based on deep learning
title_full Diabetic retinopathy detection based on deep learning
title_fullStr Diabetic retinopathy detection based on deep learning
title_full_unstemmed Diabetic retinopathy detection based on deep learning
title_sort Diabetic retinopathy detection based on deep learning
author Zago, Gabriel Tozatto
author_facet Zago, Gabriel Tozatto
author_role author
dc.contributor.institution.pt_BR.fl_str_mv Universidade Federal do Espírito Santo (Ufes)
Télécom SudParis
dc.contributor.member.none.fl_str_mv Conci, Aura
Fernandes, Mariana Rampinelli
Rauber, Thomas Walter
Ciarelli, Patrick Marques
dc.contributor.author.fl_str_mv Zago, Gabriel Tozatto
dc.contributor.advisor1.fl_str_mv Andreão, Rodrigo Varejão
dc.contributor.advisor-co1.fl_str_mv Salles, Evandro Ottoni Teatini
contributor_str_mv Andreão, Rodrigo Varejão
Salles, Evandro Ottoni Teatini
dc.subject.por.fl_str_mv Retina - Doenças
Aprendizado do computador
Redes neurais (Computação)
Retina
Processamento de imagens
topic Retina - Doenças
Aprendizado do computador
Redes neurais (Computação)
Retina
Processamento de imagens
description RESUMO: A detecção precoce de retinopatia diabética (RD) é essencial, pois o tratamento oportuno pode reduzir ou até impedir a perda da visão. Além disso, a localização automática das regiões da imagem da retina que podem conter lesões pode auxiliar os especialistas na tarefa de detecção da doença. Ao mesmo tempo, imagens de baixa qualidade não permitem um diagnóstico médico preciso e causam o inconveniente de o paciente ter de retornar ao centro médico para repetir o exame de fundo do olho. Nesta tese, argumentamos que é possível propor um sistema com base na avaliação da qualidade da imagem e na localização de lesões vermelhas para detectar automaticamente RD com desempenho semelhante ao de especialistas, considerando que uma segmentação aproximada é suficiente para produzir um marcador discriminante de uma lesão. Um sistema automático robusto é proposto para avaliar a qualidade das imagens de retina visando auxiliar os profissionais de saúde durante um exame de fundo de olho. Propomos uma rede neural convolucional (CNN) pré-treinada em imagens não médicas para extrair características gerais de imagem. Os pesos da CNN são ajustados através de um procedimento de ajuste fino, resultando em um classificador de bom desempenho ajustado com uma pequena quantidade de imagens rotuladas. Também projetamos um modelo de localização de lesões usando uma abordagem de aprendizado profundo baseada em regiões. Nosso objetivo é reduzir a complexidade do modelo e melhorar seu desempenho. Para esse fim, desenvolvemos um procedimento (incluindo dois modelos de redes neurais convolucionais) para selecionar as regiões utilizadas no treinamento, de modo que os exemplos desafiadores recebessem atenção especial durante o processo de treinamento. Usando anotações de região, uma predição de RD pode ser definida na imagem inicial, sem a necessidade de treinamento especial. Nossa abordagem baseada em região permite que o modelo seja treinado com apenas 28 imagens, resultando em desempenho semelhante a trabalhos que usaram mais de um milhão de imagens rotuladas. O desempenho da CNN para avaliação da qualidade foi medido através de dois bancos de dados publicamente disponíveis (DRIMDB e ELSA-Brasil) usando dois procedimentos diferentes: validação cruzada intra-banco de dados e inter-banco de dados. A CNN alcançou uma área sob a curvacar a cterística de operação do receptor(AUC) de 99,98% no DRIMDB e uma AUC de 98,56% no ELSA-Brasil no experimento inter-bancos (ou seja, com treinamento e testes não realizados no mesmo conjunto de dados). Esses resultados mostram a robustez do modelo proposto para vários dispositivos de aquisição de imagens sem a necessidade de adaptação especial, tornando-o um bom candidato para uso em cenários operacionais. O modelo de localização da lesão foi treinado no banco de dados de Retinopatia Diabética Padrão, Nível de Calibração 1 (DIARETDB1) e testado em vários bancos de dados (incluindo Messidor) sem qualquer adaptação adicional. Alcançou uma AUC de 0,912 -95%IC0,897-0,928 para a triagem de RD e uma sensibilidade de 0,940-95% CI 0,921-0,959. Esses valores são similares a outras abordagens do estado da arte. Os resultados sugerem que a hipótese da proposta é confirmada.
publishDate 2019
dc.date.issued.fl_str_mv 2019
dc.date.accessioned.fl_str_mv 2020-03-16T18:02:19Z
dc.date.available.fl_str_mv 2020-03-16T18:02:19Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv Zago, G. T. Diabetic retinopathy detection based on deep learning. 2019. 96 f. Tese (Doutorado em Engenharia Elétrica) - Centro Tecnológico, Universidade Federal do Espírito Santo, Vitória, 2019.
dc.identifier.uri.fl_str_mv https://repositorio.ifes.edu.br/handle/123456789/543
dc.identifier.capes.pt_BR.fl_str_mv 30001013004P0
identifier_str_mv Zago, G. T. Diabetic retinopathy detection based on deep learning. 2019. 96 f. Tese (Doutorado em Engenharia Elétrica) - Centro Tecnológico, Universidade Federal do Espírito Santo, Vitória, 2019.
30001013004P0
url https://repositorio.ifes.edu.br/handle/123456789/543
dc.language.iso.fl_str_mv eng
language eng
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 96 f. : il.
dc.source.none.fl_str_mv reponame:Repositório Institucional do IFES
instname:Instituto Federal de Educação, Ciência e Tecnologia do Espírito Santo (IFES)
instacron:IFES
instname_str Instituto Federal de Educação, Ciência e Tecnologia do Espírito Santo (IFES)
instacron_str IFES
institution IFES
reponame_str Repositório Institucional do IFES
collection Repositório Institucional do IFES
bitstream.url.fl_str_mv https://repositorio.ifes.edu.br/bitstreams/2b712529-f375-4256-b286-a532276fdf67/download
https://repositorio.ifes.edu.br/bitstreams/d5063fe6-e3fd-437f-9ad1-38a54f8208e3/download
https://repositorio.ifes.edu.br/bitstreams/b2b51d30-21f2-4224-8911-39f73d99cc99/download
https://repositorio.ifes.edu.br/bitstreams/0be46c2a-a403-48a4-be30-087bb038f6c1/download
bitstream.checksum.fl_str_mv 7a00beea5f62bb5459a47014394cd0dd
ac7cb971050ed632be934da23d966924
b17a92547c0d9ebd6596159fe88d62cd
e46daee4ea5205c183f3442077d84331
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional do IFES - Instituto Federal de Educação, Ciência e Tecnologia do Espírito Santo (IFES)
repository.mail.fl_str_mv repositorio@ifes.edu.br
_version_ 1864451002519781376