Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano

Detalhes bibliográficos
Ano de defesa: 2024
Autor(a) principal: Vilela Neto, Paulo lattes
Orientador(a): Moura, Alexandre Sampaio
Banca de defesa: Cardoso Jr., Aloísio, Campos, Marcelo Esteves Chaves
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade José do Rosário Vellano
Programa de Pós-Graduação: Programa de Mestrado em Ensino em Saúde
Departamento: Pós-Graduação
País: Brasil
Palavras-chave em Português:
Área do conhecimento CNPq:
Link de acesso: http://tede2.unifenas.br:8080/jspui/handle/jspui/348
Resumo: Introduction: In surgical education, evaluating learners' competencies while ensuring patient safety is a significant challenge. However, a competency assessment system based on entrustment levels assigned for Entrustable Professional Activities (EPAs) can help overcome this challenge. This study aimed to analyze the implementation of such a system in the general surgery residency program at Alzira Velano University Hospital in Alfenas, Minas Gerais. Methods: This descriptive study conducted a cross-sectional analysis of residents' and preceptors' perceptions of this new assessment framework. The implementation process and residents' performance were described by analyzing academic records. The perceptions of residents and preceptors were analyzed using an online questionnaire administered at the end of the process. Data collection occurred between May and July 2023. Results: It is evident that residents and preceptors widely accepted competency-based medical assessment in the program; the study period involved 110 resident evaluations, averaging 18.3 evaluations per resident. The Clinical Competence Committee (CCC) assigned the entrustment levels by both R1 residents in the postoperative EPA and one R2 resident in the preoperative EPA, while the remaining evaluated residents did not reach the expected levels in the assessed EPAs. The remaining evaluated residents did not reach the expected levels in the assessed EPAs. Due to the significant competency gaps identified and described, implementing competency-based medical assessment in the long term requires commitment from preceptors, residents, and the institution. Nonetheless, the perception questionnaire analysis showed widespread acceptance of the assessment method, which is well-presented, easily understood, fair, and valuable in promoting feedback and learning. All preceptors affirmed that the process was transparent and fair, although 37.5% reported difficulty conducting the evaluations. Among residents, all considered the method an excellent overall performance evaluation tool and helpful in providing feedback, although 16.7% partially disagreed with the entrustment level assigned by the CCC. Conclusion: Our program has found that residents and preceptors widely accept competency based medical assessment. This evaluation provides a more comprehensive view of a resident's abilities and offers consistent and accurate feedback. However, it is essential to note that full implementation of this approach is a long-term process that requires consistent commitment from preceptors, residents, and the institution.
id UNFE_23be97e7be6a7b8d357f098799c5d01a
oai_identifier_str oai:tede2.unifenas.br:jspui/348
network_acronym_str UNFE
network_name_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
repository_id_str
spelling Moura, Alexandre SampaioCardoso Jr., AloísioCampos, Marcelo Esteves Chaveshttp://lattes.cnpq.br/7309156150138807Vilela Neto, Paulo2025-09-12T17:40:53Z2024-02-23Vilela Neto, Paulo. Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano. 2024. Dissertação (Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano , Belo Horizonte, 92p.http://tede2.unifenas.br:8080/jspui/handle/jspui/348Introduction: In surgical education, evaluating learners' competencies while ensuring patient safety is a significant challenge. However, a competency assessment system based on entrustment levels assigned for Entrustable Professional Activities (EPAs) can help overcome this challenge. This study aimed to analyze the implementation of such a system in the general surgery residency program at Alzira Velano University Hospital in Alfenas, Minas Gerais. Methods: This descriptive study conducted a cross-sectional analysis of residents' and preceptors' perceptions of this new assessment framework. The implementation process and residents' performance were described by analyzing academic records. The perceptions of residents and preceptors were analyzed using an online questionnaire administered at the end of the process. Data collection occurred between May and July 2023. Results: It is evident that residents and preceptors widely accepted competency-based medical assessment in the program; the study period involved 110 resident evaluations, averaging 18.3 evaluations per resident. The Clinical Competence Committee (CCC) assigned the entrustment levels by both R1 residents in the postoperative EPA and one R2 resident in the preoperative EPA, while the remaining evaluated residents did not reach the expected levels in the assessed EPAs. The remaining evaluated residents did not reach the expected levels in the assessed EPAs. Due to the significant competency gaps identified and described, implementing competency-based medical assessment in the long term requires commitment from preceptors, residents, and the institution. Nonetheless, the perception questionnaire analysis showed widespread acceptance of the assessment method, which is well-presented, easily understood, fair, and valuable in promoting feedback and learning. All preceptors affirmed that the process was transparent and fair, although 37.5% reported difficulty conducting the evaluations. Among residents, all considered the method an excellent overall performance evaluation tool and helpful in providing feedback, although 16.7% partially disagreed with the entrustment level assigned by the CCC. Conclusion: Our program has found that residents and preceptors widely accept competency based medical assessment. This evaluation provides a more comprehensive view of a resident's abilities and offers consistent and accurate feedback. However, it is essential to note that full implementation of this approach is a long-term process that requires consistent commitment from preceptors, residents, and the institution.Um dos maiores desafios do ensino cirúrgico consiste no processo de avaliação de competências de aprendizes para que esses possam progressivamente ir ganhando autonomia sem, no entanto, comprometer a segurança do cuidado. O uso de um sistema de avaliação de competências, por meio de atribuição de confiança em relação ao desempenho do residente em Atividades Profissionais Confiáveis (APCs), pode ajudar no enfrentamento deste desafio. O objetivo deste estudo foi analisar a implantação de um sistema de avaliação baseado em APCs na residência médica de cirurgia geral do Hospital Universitário Alzira Velano em Alfenas, Minas Gerais. Métodos: Trata-se de um estudo descritivo que realizou uma análise transversal da percepção de residentes e preceptores acerca deste novo sistema de avaliação. A descrição do processo de implantação e do desempenho dos residentes foi feita por meio da análise de registros acadêmicos. A percepção de residentes e preceptores foi analisada por meio de um questionário on-line aplicado ao final do processo. A coleta de dados ocorreu entre maio e julho de 2023. Resultados: Foram realizadas 110 avaliações dos residentes no período de estudo, com uma média de 18,3 avaliações por residente. Um comitê de competências clínicas (CCC) atribuiu níveis de confiança para cada residente em cada APC. O nível de confiança esperado foi alcançado pelos dois R1 na APC de pós-operatório e por um R2 na APC de pré-operatório. Os demais residentes avaliados não atingiram os níveis esperados nas APCs avaliadas. A principais lacunas de competências foram identificadas e descritas. A avaliação dos questionários de percepção mostrou ampla aceitação do método de avaliação, considerado bem apresentado, de fácil compreensão, justo e útil em promover feedback e aprendizado. Todos os preceptores afirmaram que o processo foi claro e justo, no entanto, 37,5% relataram ter tido alguma dificuldade na realização das avaliações. Dentre os residentes, todos consideraram o método uma boa forma de avaliação global de desempenho e útil em promover feedback, porém 16,7% discordaram parcialmente do nível de confiança recebido pelo CCC. Conclusão: A avaliação médica baseada em competências foi amplamente aceita por residentes e preceptores em nosso serviço. Além de permitir uma avaliação mais completa dos residentes, gerou a oportunidade de oferecimento de feedbacks mais consistentes e precisos. Sua implementação completa é um processo de longo prazo que exige empenho da equipe e da instituição.Submitted by Samira Ramos (samira.ramos@unifenas.br) on 2025-05-08T19:10:12Z No. of bitstreams: 1 Dissertac¸a Paulo Vilela Neto 2024.pdf: 4900194 bytes, checksum: 41d98eb5ee099b5270c02d435684dfe9 (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2025-09-12T17:39:01Z (GMT) No. of bitstreams: 1 Dissertac¸a Paulo Vilela Neto 2024.pdf: 4900194 bytes, checksum: 41d98eb5ee099b5270c02d435684dfe9 (MD5)Approved for entry into archive by Samira Ramos (samira.ramos@unifenas.br) on 2025-09-12T17:40:32Z (GMT) No. of bitstreams: 1 Dissertac¸a Paulo Vilela Neto 2024.pdf: 4900194 bytes, checksum: 41d98eb5ee099b5270c02d435684dfe9 (MD5)Made available in DSpace on 2025-09-12T17:40:53Z (GMT). No. of bitstreams: 1 Dissertac¸a Paulo Vilela Neto 2024.pdf: 4900194 bytes, checksum: 41d98eb5ee099b5270c02d435684dfe9 (MD5) Previous issue date: 2024-02-23application/pdfporUniversidade José do Rosário VellanoPrograma de Mestrado em Ensino em SaúdeUNIFENASBrasilPós-GraduaçãoVilela Neto, Paulo. Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano. 2024. Dissertação (Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano , Belo Horizonte, 92p.-7785865496449744764500500600-7642911903105032531-969369452308786627Residentes (Medicina)Avaliação educacionalCirurgiaCIENCIAS DA SAUDE::MEDICINAAnálise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velanoinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisinfo:eu-repo/semantics/openAccessreponame:Biblioteca Digital de Teses e Dissertações da UNIFENASinstname:Universidade José do Rosário Vellano (UNIFENAS)instacron:UNIFENASORIGINALDissertac¸a Paulo Vilela Neto 2024.pdfDissertac¸a Paulo Vilela Neto 2024.pdfapplication/pdf4900194http://tede2.unifenas.br:8080/tede/bitstream/jspui/348/2/Dissertac%C2%B8a+Paulo+Vilela+Neto+2024.pdf41d98eb5ee099b5270c02d435684dfe9MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81057http://tede2.unifenas.br:8080/tede/bitstream/jspui/348/1/license.txt13994a59d610083f15989ba8cb12a758MD51jspui/3482025-10-13 20:10:50.948oai:tede2.unifenas.br:jspui/348TGljZW7Dp2EgZGUgZGlzdHJpYnVpw6fDo28gbsOjbyBleGNsdXNpdmEuCgpDb20gYSBhcHJlc2VudGHDp8OjbyBkZXN0YSBsaWNlbsOnYSBldSwgQW5hIEJlYXRyaXogQ2FydmFsaG8gVGVycmEgY29uY2VkbyDDoCBVbml2ZXJzaWRhZGUgSm9zw6kgZG8gUm9zw6FyaW8gVmVsbGFubyAtIFVOSUZFTkFTIG8gZGlyZWl0byBuw6NvLWV4Y2x1c2l2byBkZSByZXByb2R1emlyLCB0cmFkdXppciBlL291IGRpc3RyaWJ1aXIgYSB0ZXNlIChpbmNsdWluZG8gbyByZXN1bW8pIHBvciB0b2RvIG8gbXVuZG8gbm8gZm9ybWF0byBpbXByZXNzbyBlIGVsZXRyw7RuaWNvIGUgZW0gcXVhbHF1ZXIgbWVpbywgaW5jbHVpbmRvIG9zIGZvcm1hdG9zIMOhdWRpbyBvdSB2w61kZW8uCgpDb25jb3JkbyBxdWUgYSBVTklGRU5BUyBwb2RlLCBzZW0gYWx0ZXJhciBvIGNvbnRlw7pkbywgdHJhbnNwb3IgYSBtaW5oYSB0ZXNlIHBhcmEgcXVhbHF1ZXIgbWVpbyBvdSBmb3JtYXRvIHBhcmEgZmlucyBkZSBwcmVzZXJ2YcOnw6NvLgoKQ29uY29yZG8gcXVlIGEgVU5JRkVOQVMgcG9kZSBtYW50ZXIgbWFpcyBkZSB1bWEgY8OzcGlhIGRhIHRlc2UgcGFyYSBmaW5zIGRlIHNlZ3VyYW7Dp2EsIGJhY2stdXAgZSBwcmVzZXJ2YcOnw6NvLgpEZWNsYXJvIHF1ZSBhIG1pbmhhIHRlc2Ugw6kgb3JpZ2luYWwgZSBjb25jZWRvIG9zIGRpcmVpdG9zIGNvbnRpZG9zIG5lc3RhIGxpY2Vuw6dhLiBFIHRhbWLDqW0gZGVjbGFybyBxdWUgbyBkZXDDs3NpdG8gZGEgbWluaGEgdGVzZSBuw6NvIGluZnJpbmdlIGRpcmVpdG9zIGF1dG9yYWlzIGRlIG5pbmd1w6ltLgoKQSBVTklGRU5BUyBzZSBjb21wcm9tZXRlIGEgaWRlbnRpZmljYXIgY2xhcmFtZW50ZSBxdWUgQW5hIEJlYXRyaXogQ2FydmFsaG8gVGVycmEgLCDDqSBkZW50ZW50b3IoYSkgZG9zIGRpcmVpdG9zIGF1dG9yYWlzIGRhIHRlc2UsIGUgbsOjbyBmYXLDoSBxdWFscXVlciBhbHRlcmHDp8OjbywgYWzDqW0gZGFxdWVsYXMgY29uY2VkaWRhcyBwb3IgZXN0YSBsaWNlbsOnYS4KQWdyYWRlw6dvIMOgIENBUEVTIHBlbG8gYXBvaW8gZmluYW5jZWlybyEKCg==Biblioteca Digital de Teses e Dissertaçõeshttp://tede2.unifenas.br:8080/jspui/http://tede2.unifenas.br:8080/oai/requestbiblioteca@unifenas.br||biblioteca@unifenas.bropendoar:2025-10-13T23:10:50Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)false
dc.title.por.fl_str_mv Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
title Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
spellingShingle Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
Vilela Neto, Paulo
Residentes (Medicina)
Avaliação educacional
Cirurgia
CIENCIAS DA SAUDE::MEDICINA
title_short Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
title_full Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
title_fullStr Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
title_full_unstemmed Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
title_sort Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano
author Vilela Neto, Paulo
author_facet Vilela Neto, Paulo
author_role author
dc.contributor.advisor1.fl_str_mv Moura, Alexandre Sampaio
dc.contributor.referee2.fl_str_mv Cardoso Jr., Aloísio
dc.contributor.referee3.fl_str_mv Campos, Marcelo Esteves Chaves
dc.contributor.authorLattes.fl_str_mv http://lattes.cnpq.br/7309156150138807
dc.contributor.author.fl_str_mv Vilela Neto, Paulo
contributor_str_mv Moura, Alexandre Sampaio
Cardoso Jr., Aloísio
Campos, Marcelo Esteves Chaves
dc.subject.por.fl_str_mv Residentes (Medicina)
Avaliação educacional
Cirurgia
topic Residentes (Medicina)
Avaliação educacional
Cirurgia
CIENCIAS DA SAUDE::MEDICINA
dc.subject.cnpq.fl_str_mv CIENCIAS DA SAUDE::MEDICINA
description Introduction: In surgical education, evaluating learners' competencies while ensuring patient safety is a significant challenge. However, a competency assessment system based on entrustment levels assigned for Entrustable Professional Activities (EPAs) can help overcome this challenge. This study aimed to analyze the implementation of such a system in the general surgery residency program at Alzira Velano University Hospital in Alfenas, Minas Gerais. Methods: This descriptive study conducted a cross-sectional analysis of residents' and preceptors' perceptions of this new assessment framework. The implementation process and residents' performance were described by analyzing academic records. The perceptions of residents and preceptors were analyzed using an online questionnaire administered at the end of the process. Data collection occurred between May and July 2023. Results: It is evident that residents and preceptors widely accepted competency-based medical assessment in the program; the study period involved 110 resident evaluations, averaging 18.3 evaluations per resident. The Clinical Competence Committee (CCC) assigned the entrustment levels by both R1 residents in the postoperative EPA and one R2 resident in the preoperative EPA, while the remaining evaluated residents did not reach the expected levels in the assessed EPAs. The remaining evaluated residents did not reach the expected levels in the assessed EPAs. Due to the significant competency gaps identified and described, implementing competency-based medical assessment in the long term requires commitment from preceptors, residents, and the institution. Nonetheless, the perception questionnaire analysis showed widespread acceptance of the assessment method, which is well-presented, easily understood, fair, and valuable in promoting feedback and learning. All preceptors affirmed that the process was transparent and fair, although 37.5% reported difficulty conducting the evaluations. Among residents, all considered the method an excellent overall performance evaluation tool and helpful in providing feedback, although 16.7% partially disagreed with the entrustment level assigned by the CCC. Conclusion: Our program has found that residents and preceptors widely accept competency based medical assessment. This evaluation provides a more comprehensive view of a resident's abilities and offers consistent and accurate feedback. However, it is essential to note that full implementation of this approach is a long-term process that requires consistent commitment from preceptors, residents, and the institution.
publishDate 2024
dc.date.issued.fl_str_mv 2024-02-23
dc.date.accessioned.fl_str_mv 2025-09-12T17:40:53Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv Vilela Neto, Paulo. Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano. 2024. Dissertação (Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano , Belo Horizonte, 92p.
dc.identifier.uri.fl_str_mv http://tede2.unifenas.br:8080/jspui/handle/jspui/348
identifier_str_mv Vilela Neto, Paulo. Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano. 2024. Dissertação (Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano , Belo Horizonte, 92p.
url http://tede2.unifenas.br:8080/jspui/handle/jspui/348
dc.language.iso.fl_str_mv por
language por
dc.relation.por.fl_str_mv Vilela Neto, Paulo. Análise da implantação da avaliação baseada em atividades profissionais confiáveis na residência médica de cirurgia geral do Hospital Universitário Alzira Velano. 2024. Dissertação (Mestrado em Ensino em Saúde) - Universidade Professor Edson Antônio Velano , Belo Horizonte, 92p.
dc.relation.program.fl_str_mv -7785865496449744764
dc.relation.confidence.fl_str_mv 500
500
600
dc.relation.department.fl_str_mv -7642911903105032531
dc.relation.cnpq.fl_str_mv -969369452308786627
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.publisher.program.fl_str_mv Programa de Mestrado em Ensino em Saúde
dc.publisher.initials.fl_str_mv UNIFENAS
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Pós-Graduação
publisher.none.fl_str_mv Universidade José do Rosário Vellano
dc.source.none.fl_str_mv reponame:Biblioteca Digital de Teses e Dissertações da UNIFENAS
instname:Universidade José do Rosário Vellano (UNIFENAS)
instacron:UNIFENAS
instname_str Universidade José do Rosário Vellano (UNIFENAS)
instacron_str UNIFENAS
institution UNIFENAS
reponame_str Biblioteca Digital de Teses e Dissertações da UNIFENAS
collection Biblioteca Digital de Teses e Dissertações da UNIFENAS
bitstream.url.fl_str_mv http://tede2.unifenas.br:8080/tede/bitstream/jspui/348/2/Dissertac%C2%B8a+Paulo+Vilela+Neto+2024.pdf
http://tede2.unifenas.br:8080/tede/bitstream/jspui/348/1/license.txt
bitstream.checksum.fl_str_mv 41d98eb5ee099b5270c02d435684dfe9
13994a59d610083f15989ba8cb12a758
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da UNIFENAS - Universidade José do Rosário Vellano (UNIFENAS)
repository.mail.fl_str_mv biblioteca@unifenas.br||biblioteca@unifenas.br
_version_ 1857030299207073792