Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item

Detalhes bibliográficos
Ano de defesa: 2023
Autor(a) principal: Rocha, Monica Couto Guedes Sejanes da lattes
Orientador(a): Chebli, Julio Maria Fonseca lattes
Banca de defesa: Ricardo, Djalma Rabelo lattes, Ezequiel, Oscarina da Silva, Silva, Wellington, Guedes, Ana Lúcia de Lima
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal de Juiz de Fora (UFJF)
Programa de Pós-Graduação: Programa de Pós-graduação em Saúde Brasileira
Departamento: Faculdade de Medicina
País: Brasil
Palavras-chave em Português:
Área do conhecimento CNPq:
Link de acesso: https://repositorio.ufjf.br/jspui/handle/ufjf/15867
Resumo: Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de Medicina
id UFJF_c1a3f64aee06db75a36a9f5f22446a04
oai_identifier_str oai:hermes.cpd.ufjf.br:ufjf/15867
network_acronym_str UFJF
network_name_str Repositório Institucional da UFJF
repository_id_str
spelling Chebli, Julio Maria Fonsecahttp://buscatextual.cnpq.br/buscatextual/busca.doTibiriçá, Sandra Helena Cerratohttp://buscatextual.cnpq.br/buscatextual/busca.doRicardo, Djalma RabeloEzequiel, Oscarina da Silvahttp://buscatextual.cnpq.br/buscatextual/busca.doSilva, Wellingtonhttp://buscatextual.cnpq.br/buscatextual/busca.doGuedes, Ana Lúcia de Limahttp://buscatextual.cnpq.br/buscatextual/busca.dohttp://buscatextual.cnpq.br/buscatextual/busca.doRocha, Monica Couto Guedes Sejanes da2023-08-30T14:43:03Z2023-08-302023-08-30T14:43:03Z2023-07-07https://repositorio.ufjf.br/jspui/handle/ufjf/15867Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de MedicinaObjective: To evaluate, through Item Response Theory, the results of the Progress Test according to the students' proficiency and performance levels. Methods: A crosssectional study was conducted with 1559 Brazilian medical students. The estimation of proficiency and calibration of item parameters was performed using BILOG MG 3.0 software. For the construction of the proficiency scale, items with discrimination a > 1 were selected, which when submitted to the clustering technique using the k-means methodology, formed six subsets with increasing levels of proficiency. The pedagogical interpretation of the scale was obtained by relating proficiency levels to the cognitive domains tested. The 95% confidence interval was calculated and Tukey's test was applied to analyze the difference between the proficiency means. Results: The frequency of students who took the test was 94.2%. Proficiency ranged from 470 to 580 points, with a mean of 500 points, and increased progressively in graduation, an indicator of the validity of the measures obtained. The students' adjustment curve to the test indicated a difficult test and discrimination was moderate to high in 61.5% of the items. Conclusions: The analysis of the results of the Progress Test performed by Item Response Theory proved to be a robust tool to assess the performance of medical students.porUniversidade Federal de Juiz de Fora (UFJF)Programa de Pós-graduação em Saúde BrasileiraUFJFBrasilFaculdade de MedicinaAttribution-NonCommercial-NoDerivs 3.0 Brazilhttp://creativecommons.org/licenses/by-nc-nd/3.0/br/info:eu-repo/semantics/openAccessCNPQ::CIENCIAS DA SAUDEEducação médicaAvaliação educacionalCogniçãoCompetência profissionalPsicometriaMedical educationEducational assessmentCognitionProfessional competencePsychometricsAvaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao iteminfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisreponame:Repositório Institucional da UFJFinstname:Universidade Federal de Juiz de Fora (UFJF)instacron:UFJFORIGINALmonicacoutoguedessejanesdarocha.pdfmonicacoutoguedessejanesdarocha.pdfapplication/pdf1437438https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/1/monicacoutoguedessejanesdarocha.pdf0d4d597c41643e58f56de44fee12e0efMD51CC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8811https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/2/license_rdfe39d27027a6cc9cb039ad269a5db8e34MD52LICENSElicense.txtlicense.txttext/plain; charset=utf-81748https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/3/license.txt8a4605be74aa9ea9d79846c1fba20a33MD53TEXTmonicacoutoguedessejanesdarocha.pdf.txtmonicacoutoguedessejanesdarocha.pdf.txtExtracted texttext/plain136858https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/4/monicacoutoguedessejanesdarocha.pdf.txt011641e506c10c64a5e4cb9afe2cb3e5MD54THUMBNAILmonicacoutoguedessejanesdarocha.pdf.jpgmonicacoutoguedessejanesdarocha.pdf.jpgGenerated Thumbnailimage/jpeg1251https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/5/monicacoutoguedessejanesdarocha.pdf.jpgd56569d80735614b3d9d5a7a2646019eMD55ufjf/158672023-08-31 03:04:11.564oai:hermes.cpd.ufjf.br:ufjf/15867Tk9URTogUExBQ0UgWU9VUiBPV04gTElDRU5TRSBIRVJFClRoaXMgc2FtcGxlIGxpY2Vuc2UgaXMgcHJvdmlkZWQgZm9yIGluZm9ybWF0aW9uYWwgcHVycG9zZXMgb25seS4KCk5PTi1FWENMVVNJVkUgRElTVFJJQlVUSU9OIExJQ0VOU0UKCkJ5IHNpZ25pbmcgYW5kIHN1Ym1pdHRpbmcgdGhpcyBsaWNlbnNlLCB5b3UgKHRoZSBhdXRob3Iocykgb3IgY29weXJpZ2h0Cm93bmVyKSBncmFudHMgdG8gRFNwYWNlIFVuaXZlcnNpdHkgKERTVSkgdGhlIG5vbi1leGNsdXNpdmUgcmlnaHQgdG8gcmVwcm9kdWNlLAp0cmFuc2xhdGUgKGFzIGRlZmluZWQgYmVsb3cpLCBhbmQvb3IgZGlzdHJpYnV0ZSB5b3VyIHN1Ym1pc3Npb24gKGluY2x1ZGluZwp0aGUgYWJzdHJhY3QpIHdvcmxkd2lkZSBpbiBwcmludCBhbmQgZWxlY3Ryb25pYyBmb3JtYXQgYW5kIGluIGFueSBtZWRpdW0sCmluY2x1ZGluZyBidXQgbm90IGxpbWl0ZWQgdG8gYXVkaW8gb3IgdmlkZW8uCgpZb3UgYWdyZWUgdGhhdCBEU1UgbWF5LCB3aXRob3V0IGNoYW5naW5nIHRoZSBjb250ZW50LCB0cmFuc2xhdGUgdGhlCnN1Ym1pc3Npb24gdG8gYW55IG1lZGl1bSBvciBmb3JtYXQgZm9yIHRoZSBwdXJwb3NlIG9mIHByZXNlcnZhdGlvbi4KCllvdSBhbHNvIGFncmVlIHRoYXQgRFNVIG1heSBrZWVwIG1vcmUgdGhhbiBvbmUgY29weSBvZiB0aGlzIHN1Ym1pc3Npb24gZm9yCnB1cnBvc2VzIG9mIHNlY3VyaXR5LCBiYWNrLXVwIGFuZCBwcmVzZXJ2YXRpb24uCgpZb3UgcmVwcmVzZW50IHRoYXQgdGhlIHN1Ym1pc3Npb24gaXMgeW91ciBvcmlnaW5hbCB3b3JrLCBhbmQgdGhhdCB5b3UgaGF2ZQp0aGUgcmlnaHQgdG8gZ3JhbnQgdGhlIHJpZ2h0cyBjb250YWluZWQgaW4gdGhpcyBsaWNlbnNlLiBZb3UgYWxzbyByZXByZXNlbnQKdGhhdCB5b3VyIHN1Ym1pc3Npb24gZG9lcyBub3QsIHRvIHRoZSBiZXN0IG9mIHlvdXIga25vd2xlZGdlLCBpbmZyaW5nZSB1cG9uCmFueW9uZSdzIGNvcHlyaWdodC4KCklmIHRoZSBzdWJtaXNzaW9uIGNvbnRhaW5zIG1hdGVyaWFsIGZvciB3aGljaCB5b3UgZG8gbm90IGhvbGQgY29weXJpZ2h0LAp5b3UgcmVwcmVzZW50IHRoYXQgeW91IGhhdmUgb2J0YWluZWQgdGhlIHVucmVzdHJpY3RlZCBwZXJtaXNzaW9uIG9mIHRoZQpjb3B5cmlnaHQgb3duZXIgdG8gZ3JhbnQgRFNVIHRoZSByaWdodHMgcmVxdWlyZWQgYnkgdGhpcyBsaWNlbnNlLCBhbmQgdGhhdApzdWNoIHRoaXJkLXBhcnR5IG93bmVkIG1hdGVyaWFsIGlzIGNsZWFybHkgaWRlbnRpZmllZCBhbmQgYWNrbm93bGVkZ2VkCndpdGhpbiB0aGUgdGV4dCBvciBjb250ZW50IG9mIHRoZSBzdWJtaXNzaW9uLgoKSUYgVEhFIFNVQk1JU1NJT04gSVMgQkFTRUQgVVBPTiBXT1JLIFRIQVQgSEFTIEJFRU4gU1BPTlNPUkVEIE9SIFNVUFBPUlRFRApCWSBBTiBBR0VOQ1kgT1IgT1JHQU5JWkFUSU9OIE9USEVSIFRIQU4gRFNVLCBZT1UgUkVQUkVTRU5UIFRIQVQgWU9VIEhBVkUKRlVMRklMTEVEIEFOWSBSSUdIVCBPRiBSRVZJRVcgT1IgT1RIRVIgT0JMSUdBVElPTlMgUkVRVUlSRUQgQlkgU1VDSApDT05UUkFDVCBPUiBBR1JFRU1FTlQuCgpEU1Ugd2lsbCBjbGVhcmx5IGlkZW50aWZ5IHlvdXIgbmFtZShzKSBhcyB0aGUgYXV0aG9yKHMpIG9yIG93bmVyKHMpIG9mIHRoZQpzdWJtaXNzaW9uLCBhbmQgd2lsbCBub3QgbWFrZSBhbnkgYWx0ZXJhdGlvbiwgb3RoZXIgdGhhbiBhcyBhbGxvd2VkIGJ5IHRoaXMKbGljZW5zZSwgdG8geW91ciBzdWJtaXNzaW9uLgo=Repositório InstitucionalPUBhttps://repositorio.ufjf.br/oai/requestopendoar:2023-08-31T06:04:11Repositório Institucional da UFJF - Universidade Federal de Juiz de Fora (UFJF)false
dc.title.pt_BR.fl_str_mv Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
title Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
spellingShingle Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
Rocha, Monica Couto Guedes Sejanes da
CNPQ::CIENCIAS DA SAUDE
Educação médica
Avaliação educacional
Cognição
Competência profissional
Psicometria
Medical education
Educational assessment
Cognition
Professional competence
Psychometrics
title_short Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
title_full Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
title_fullStr Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
title_full_unstemmed Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
title_sort Avaliação do desempenho do estudante de medicina pela medida da proficiência: descrição de uma metodologia de análise dos resultados do teste de progresso por meio da teoria de resposta ao item
author Rocha, Monica Couto Guedes Sejanes da
author_facet Rocha, Monica Couto Guedes Sejanes da
author_role author
dc.contributor.advisor1.fl_str_mv Chebli, Julio Maria Fonseca
dc.contributor.advisor1Lattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.advisor-co1.fl_str_mv Tibiriçá, Sandra Helena Cerrato
dc.contributor.advisor-co1Lattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.referee1.fl_str_mv Ricardo, Djalma Rabelo
dc.contributor.referee2.fl_str_mv Ezequiel, Oscarina da Silva
dc.contributor.referee2Lattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.referee3.fl_str_mv Silva, Wellington
dc.contributor.referee3Lattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.referee4.fl_str_mv Guedes, Ana Lúcia de Lima
dc.contributor.referee4Lattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.authorLattes.fl_str_mv http://buscatextual.cnpq.br/buscatextual/busca.do
dc.contributor.author.fl_str_mv Rocha, Monica Couto Guedes Sejanes da
contributor_str_mv Chebli, Julio Maria Fonseca
Tibiriçá, Sandra Helena Cerrato
Ricardo, Djalma Rabelo
Ezequiel, Oscarina da Silva
Silva, Wellington
Guedes, Ana Lúcia de Lima
dc.subject.cnpq.fl_str_mv CNPQ::CIENCIAS DA SAUDE
topic CNPQ::CIENCIAS DA SAUDE
Educação médica
Avaliação educacional
Cognição
Competência profissional
Psicometria
Medical education
Educational assessment
Cognition
Professional competence
Psychometrics
dc.subject.por.fl_str_mv Educação médica
Avaliação educacional
Cognição
Competência profissional
Psicometria
Medical education
Educational assessment
Cognition
Professional competence
Psychometrics
description Objetivo: Avaliar, por meio da Teoria de Resposta ao Item, os resultados do Teste de Progresso em função dos níveis de proficiência e desempenho dos estudantes. Métodos: Foi realizado um estudo transversal com 1559 estudantes de Medicina brasileiros. A estimativa da proficiência e calibração dos parâmetros dos itens foi realizada pelo software BILOG MG 3.0. Para a construção da escala de proficiência, foram selecionados itens de discriminação a > 1, que quando submetidos a técnica de agrupamento por meio da metodologia k-means, formaram seis subconjuntos com níveis crescentes de proficiência. A interpretação pedagógica da escala foi obtida pela relação dos níveis de proficiência com os domínios cognitivos testados. Calculado o intervalo de confiança de 95% e aplicado o teste de Tukey, para analisar a diferença entre as médias de proficiência. Resultados: A frequência de alunos que realizou o teste foi de 94,2%. A proficiência variou de 470 a 580 pontos, com média de 500 pontos e aumentou progressivamente na graduação, um indicador de validade das medidas obtidas. A curva de ajuste dos estudantes ao teste, indicou um teste difícil e a discriminação foi moderada a alta em 61,5% dos itens. Conclusões: A análise dos resultados do Teste de Progresso realizada pela Teoria de Resposta ao Item, demonstrou ser uma ferramenta robusta para avaliar o desempenho de estudantes de Medicina
publishDate 2023
dc.date.accessioned.fl_str_mv 2023-08-30T14:43:03Z
dc.date.available.fl_str_mv 2023-08-30
2023-08-30T14:43:03Z
dc.date.issued.fl_str_mv 2023-07-07
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://repositorio.ufjf.br/jspui/handle/ufjf/15867
url https://repositorio.ufjf.br/jspui/handle/ufjf/15867
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de Juiz de Fora (UFJF)
dc.publisher.program.fl_str_mv Programa de Pós-graduação em Saúde Brasileira
dc.publisher.initials.fl_str_mv UFJF
dc.publisher.country.fl_str_mv Brasil
dc.publisher.department.fl_str_mv Faculdade de Medicina
publisher.none.fl_str_mv Universidade Federal de Juiz de Fora (UFJF)
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFJF
instname:Universidade Federal de Juiz de Fora (UFJF)
instacron:UFJF
instname_str Universidade Federal de Juiz de Fora (UFJF)
instacron_str UFJF
institution UFJF
reponame_str Repositório Institucional da UFJF
collection Repositório Institucional da UFJF
bitstream.url.fl_str_mv https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/1/monicacoutoguedessejanesdarocha.pdf
https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/2/license_rdf
https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/3/license.txt
https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/4/monicacoutoguedessejanesdarocha.pdf.txt
https://repositorio.ufjf.br/jspui/bitstream/ufjf/15867/5/monicacoutoguedessejanesdarocha.pdf.jpg
bitstream.checksum.fl_str_mv 0d4d597c41643e58f56de44fee12e0ef
e39d27027a6cc9cb039ad269a5db8e34
8a4605be74aa9ea9d79846c1fba20a33
011641e506c10c64a5e4cb9afe2cb3e5
d56569d80735614b3d9d5a7a2646019e
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFJF - Universidade Federal de Juiz de Fora (UFJF)
repository.mail.fl_str_mv
_version_ 1793962443804770304