Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos

Detalhes bibliográficos
Ano de defesa: 2023
Autor(a) principal: Henrique, Matheus Silva
Orientador(a): Rodrigues, Paulo Sérgio Silva
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Centro Universitário FEI, São Bernardo do Campo
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: https://repositorio.fei.edu.br/handle/FEI/5225
https://doi.org/10.31414/EE.2023.D.131671
Resumo: As cirurgias minimamente invasivas evoluíram consideravelmente em décadas recentes e ainda podem resultar em complicações graves ao paciente relacionadas à técnica cirúrgica. A laparoscopia é um tipo de procedimento minimamente invasivo, no qual um cirurgião, por meio de imagens geradas em tempo real, movimenta instrumentos cirúrgicos através de pequenas incisões feitas no paciente. Trata-se de um procedimento com diversas fases protocolares, mas também dependente de habilidades de cada cirurgião. O rastreamento, acompanhamento e validação dessas fases é uma estratégia importante para o processo como um todo. Técnicas de Visão Computacional baseadas em aprendizado de máquina ganharam destaque recentemente, particularmente na área médica. O projeto aqui proposto apresenta uma arquitetura baseada em Mask R-CNN, Segment Anything e Long Short-Therm Memory (LSTM), que utiliza imagens capturadas de cirurgia de colecistectomia, um tipo de cirugia laparascópica, para identificar os instrumentos durante o ato, extrair informações destes instrumentos e realizar a predição de qual fase de uma cirurgia está sendo realizada. O projeto visa trazer benefícios, como: o indexamento automático de fases em um banco de dados de cirurgia, o auxílio no estudo do tempo de fases para otimizar agendamentos, e a identificação de problemas na execução de determinadas fases. O trabalho inovador alcançou a acurácia de 81,73% na previsão de fases na base de dados M2CAI, e abre espaço para novas investigações relacionadas ao modo de execução da cirurgia por meio da segmentação e monitoramento dos instrumentos cirúrgicos. Além disso, a identificação de problemas na execução de determinadas fases poderá ser realizada, contribuindo para a melhoria dos procedimentos e, consequentemente, para melhores resultados para os pacientes
id FEI_9a703e907f3c3ddcc6c7d488316d917a
oai_identifier_str oai:repositorio.fei.edu.br:FEI/5225
network_acronym_str FEI
network_name_str Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI)
repository_id_str
spelling Henrique, Matheus SilvaRodrigues, Paulo Sérgio Silva2024-01-10T15:48:49Z2024-01-10T15:48:49Z2023HENRIQUE, Matheus Silva. <b> Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos. </b> 2023. 80 p. Dissertação (Mestrado em Engenharia Elétrica ) - Centro Universitário FEI, São Bernardo do Campo, 2023. Disponível em: https://doi.org/10.31414/EE.2023.D.131671.https://repositorio.fei.edu.br/handle/FEI/5225https://doi.org/10.31414/EE.2023.D.131671As cirurgias minimamente invasivas evoluíram consideravelmente em décadas recentes e ainda podem resultar em complicações graves ao paciente relacionadas à técnica cirúrgica. A laparoscopia é um tipo de procedimento minimamente invasivo, no qual um cirurgião, por meio de imagens geradas em tempo real, movimenta instrumentos cirúrgicos através de pequenas incisões feitas no paciente. Trata-se de um procedimento com diversas fases protocolares, mas também dependente de habilidades de cada cirurgião. O rastreamento, acompanhamento e validação dessas fases é uma estratégia importante para o processo como um todo. Técnicas de Visão Computacional baseadas em aprendizado de máquina ganharam destaque recentemente, particularmente na área médica. O projeto aqui proposto apresenta uma arquitetura baseada em Mask R-CNN, Segment Anything e Long Short-Therm Memory (LSTM), que utiliza imagens capturadas de cirurgia de colecistectomia, um tipo de cirugia laparascópica, para identificar os instrumentos durante o ato, extrair informações destes instrumentos e realizar a predição de qual fase de uma cirurgia está sendo realizada. O projeto visa trazer benefícios, como: o indexamento automático de fases em um banco de dados de cirurgia, o auxílio no estudo do tempo de fases para otimizar agendamentos, e a identificação de problemas na execução de determinadas fases. O trabalho inovador alcançou a acurácia de 81,73% na previsão de fases na base de dados M2CAI, e abre espaço para novas investigações relacionadas ao modo de execução da cirurgia por meio da segmentação e monitoramento dos instrumentos cirúrgicos. Além disso, a identificação de problemas na execução de determinadas fases poderá ser realizada, contribuindo para a melhoria dos procedimentos e, consequentemente, para melhores resultados para os pacientesMinimally invasive surgeries have significantly evolved in recent decades, yet they can still result in serious patient complications related to surgical technique. Laparoscopy is a type of minimally invasive procedure in which a surgeon, using real-time generated images, moves surgical instruments through small incisions made in the patient. It involves several protocol-based phases but is also depends on the skills of each surgeon. Tracking, monitoring, and validating these phases are crucial strategies for the overall process. Computer vision techniques based on machine learning have gained importance recently, particularly in the medical field. The project presented here introduces an architecture based on Mask R-CNN, Segment Anything, and Long Short-Term Memory (LSTM). It employs images captured during cholecystectomy surgery, a type of laparoscopic procedure, to identify instruments during the operation, extract information from these instruments, and predict which phase of a surgery is being performed. The project aims to bring benefits such as automatic phase indexing in a surgery database, assistance in studying phase durations for scheduling optimization, and the identification of issues in the execution of specific phases. This innovative work achieved an 81,73% accuracy rate in predicting phases in the M2CAI database, paving the way for further investigations related to the execution of surgery through instrument segmentation and monitoring. Furthermore, it enables the identification of issues during specific phases, contributing to procedure improvement and, consequently, better outcomes for patients.FUNDAÇÃO EDUCACIONAL INACIANA PADRE SABOIA DE MEDEIROSporpt_BRCentro Universitário FEI, São Bernardo do CampoRede neural convolucionalUma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeosinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisreponame:Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI)instname:Centro Universitário da Fundação Educacional Inaciana (FEI)instacron:FEIinfo:eu-repo/semantics/openAccessORIGINALfulltext.pdfapplication/pdf5498016https://repositorio.fei.edu.br/bitstreams/6fb64d91-7c30-4077-a1c5-f6ccb3e17dea/downloadd8f92506dd8d20cfbd35aa404ebdce03MD51trueAnonymousREADTEXTfulltext.pdf.txtfulltext.pdf.txtExtracted texttext/plain103800https://repositorio.fei.edu.br/bitstreams/78ce21bc-6b5a-4491-85bd-4d73c20034e0/download0336d189514077f5ab8289a566ed4c19MD52falseAnonymousREADTHUMBNAILfulltext.pdf.jpgfulltext.pdf.jpgGenerated Thumbnailimage/jpeg2479https://repositorio.fei.edu.br/bitstreams/dc3c1efe-a3f2-4bf0-831f-d985c614d4b9/downloadae5588a9d2761abc3c6461dd3d0d196fMD53falseAnonymousREADFEI/52252025-04-03 00:02:10.264open.accessoai:repositorio.fei.edu.br:FEI/5225https://repositorio.fei.edu.brBiblioteca Digital de Teses e Dissertaçõeshttp://sofia.fei.edu.br/pergamum/biblioteca/PRIhttps://repositorio-api.fei.edu.br/server/oai/requestcfernandes@fei.edu.bropendoar:2025-04-03T00:02:10Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI) - Centro Universitário da Fundação Educacional Inaciana (FEI)false
dc.title.pt_BR.fl_str_mv Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
title Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
spellingShingle Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
Henrique, Matheus Silva
Rede neural convolucional
title_short Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
title_full Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
title_fullStr Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
title_full_unstemmed Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
title_sort Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos
author Henrique, Matheus Silva
author_facet Henrique, Matheus Silva
author_role author
dc.contributor.author.fl_str_mv Henrique, Matheus Silva
dc.contributor.advisor1.fl_str_mv Rodrigues, Paulo Sérgio Silva
contributor_str_mv Rodrigues, Paulo Sérgio Silva
dc.subject.por.fl_str_mv Rede neural convolucional
topic Rede neural convolucional
description As cirurgias minimamente invasivas evoluíram consideravelmente em décadas recentes e ainda podem resultar em complicações graves ao paciente relacionadas à técnica cirúrgica. A laparoscopia é um tipo de procedimento minimamente invasivo, no qual um cirurgião, por meio de imagens geradas em tempo real, movimenta instrumentos cirúrgicos através de pequenas incisões feitas no paciente. Trata-se de um procedimento com diversas fases protocolares, mas também dependente de habilidades de cada cirurgião. O rastreamento, acompanhamento e validação dessas fases é uma estratégia importante para o processo como um todo. Técnicas de Visão Computacional baseadas em aprendizado de máquina ganharam destaque recentemente, particularmente na área médica. O projeto aqui proposto apresenta uma arquitetura baseada em Mask R-CNN, Segment Anything e Long Short-Therm Memory (LSTM), que utiliza imagens capturadas de cirurgia de colecistectomia, um tipo de cirugia laparascópica, para identificar os instrumentos durante o ato, extrair informações destes instrumentos e realizar a predição de qual fase de uma cirurgia está sendo realizada. O projeto visa trazer benefícios, como: o indexamento automático de fases em um banco de dados de cirurgia, o auxílio no estudo do tempo de fases para otimizar agendamentos, e a identificação de problemas na execução de determinadas fases. O trabalho inovador alcançou a acurácia de 81,73% na previsão de fases na base de dados M2CAI, e abre espaço para novas investigações relacionadas ao modo de execução da cirurgia por meio da segmentação e monitoramento dos instrumentos cirúrgicos. Além disso, a identificação de problemas na execução de determinadas fases poderá ser realizada, contribuindo para a melhoria dos procedimentos e, consequentemente, para melhores resultados para os pacientes
publishDate 2023
dc.date.issued.fl_str_mv 2023
dc.date.accessioned.fl_str_mv 2024-01-10T15:48:49Z
dc.date.available.fl_str_mv 2024-01-10T15:48:49Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv HENRIQUE, Matheus Silva. <b> Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos. </b> 2023. 80 p. Dissertação (Mestrado em Engenharia Elétrica ) - Centro Universitário FEI, São Bernardo do Campo, 2023. Disponível em: https://doi.org/10.31414/EE.2023.D.131671.
dc.identifier.uri.fl_str_mv https://repositorio.fei.edu.br/handle/FEI/5225
dc.identifier.doi.none.fl_str_mv https://doi.org/10.31414/EE.2023.D.131671
identifier_str_mv HENRIQUE, Matheus Silva. <b> Uma metodologia baseada em aprendizado de máquina para predição de fases de cirurgias laparoscópicas a partir de vídeos. </b> 2023. 80 p. Dissertação (Mestrado em Engenharia Elétrica ) - Centro Universitário FEI, São Bernardo do Campo, 2023. Disponível em: https://doi.org/10.31414/EE.2023.D.131671.
url https://repositorio.fei.edu.br/handle/FEI/5225
https://doi.org/10.31414/EE.2023.D.131671
dc.language.iso.fl_str_mv por
pt_BR
language por
language_invalid_str_mv pt_BR
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Centro Universitário FEI, São Bernardo do Campo
publisher.none.fl_str_mv Centro Universitário FEI, São Bernardo do Campo
dc.source.none.fl_str_mv reponame:Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI)
instname:Centro Universitário da Fundação Educacional Inaciana (FEI)
instacron:FEI
instname_str Centro Universitário da Fundação Educacional Inaciana (FEI)
instacron_str FEI
institution FEI
reponame_str Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI)
collection Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI)
bitstream.url.fl_str_mv https://repositorio.fei.edu.br/bitstreams/6fb64d91-7c30-4077-a1c5-f6ccb3e17dea/download
https://repositorio.fei.edu.br/bitstreams/78ce21bc-6b5a-4491-85bd-4d73c20034e0/download
https://repositorio.fei.edu.br/bitstreams/dc3c1efe-a3f2-4bf0-831f-d985c614d4b9/download
bitstream.checksum.fl_str_mv d8f92506dd8d20cfbd35aa404ebdce03
0336d189514077f5ab8289a566ed4c19
ae5588a9d2761abc3c6461dd3d0d196f
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
repository.name.fl_str_mv Repositório do Conhecimento Institucional do Centro Universitário da Fundação Educacional Inaciana (FEI) - Centro Universitário da Fundação Educacional Inaciana (FEI)
repository.mail.fl_str_mv cfernandes@fei.edu.br
_version_ 1865734578438668288