Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina

Detalhes bibliográficos
Ano de defesa: 2024
Autor(a) principal: Cangiani, Maria Laura Machado
Orientador(a): Faria, Leandro Innocentini Lopes de lattes
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Universidade Federal de São Carlos
Câmpus São Carlos
Programa de Pós-Graduação: Programa de Pós-Graduação em Ciência da Informação - PPGCI
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Palavras-chave em Inglês:
Área do conhecimento CNPq:
Link de acesso: https://repositorio.ufscar.br/handle/20.500.14289/21333
Resumo: Rankings are ubiquitous in monitoring university performance, but there is controversy about their procedures. One intriguing fact is the divergence observed between the overall position, research position and citation position occupied by the universities evaluated by THE Latin America University Rankings: the universities best evaluated by this ranking are also well evaluated in research, but they are not the best evaluated in citation. This divergence is due to the methodology for scoring universities in the Citation indicator, based on Field-Weighted Citation Impact and which has undergone recent adjustments, including the introduction of the Research Strength metric, aiming to better represent the performance of universities in citation. This research aims to evaluate the new methodology of the Times Higher Education by simulating the calculation of Research Strength. The research is configured as exploratory, quantitative and comparative in that it seeks to expand knowledge about the impact caused by a recently implemented methodology, using position and score data from the rankings, as well as publication and citation data, in addition to its own calculations, comparing the performance of several universities. Data from THE Latin America University Rankings 2022 and the Scival Platform were used. High correlations were found between the Overall, Teaching and Research Scores and low correlation between the Overall and Citation Scores and between Citation Score and Field-Weighted Citation Impact. The simulation carried out among the top 100 universities in THE Latin America University Rankings 2022, using Research Strength, showed that this metric may have the opposite effect to that expected, favoring the best citation performance of universities with many publications with many co-authors.
id SCAR_b10cdd0ad4e7ee26ddb18e5829619be6
oai_identifier_str oai:repositorio.ufscar.br:20.500.14289/21333
network_acronym_str SCAR
network_name_str Repositório Institucional da UFSCAR
repository_id_str
spelling Cangiani, Maria Laura MachadoFaria, Leandro Innocentini Lopes dehttp://lattes.cnpq.br/0767710394930118http://lattes.cnpq.br/5263317427243364https://orcid.org/0009-0001-8095-7835https://orcid.org/0000-0002-8369-13152025-02-06T19:30:46Z2024-12-18CANGIANI, Maria Laura Machado. Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina. 2024. Dissertação (Mestrado em Ciência da Informação) – Universidade Federal de São Carlos, São Carlos, 2024. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/21333.https://repositorio.ufscar.br/handle/20.500.14289/21333Rankings are ubiquitous in monitoring university performance, but there is controversy about their procedures. One intriguing fact is the divergence observed between the overall position, research position and citation position occupied by the universities evaluated by THE Latin America University Rankings: the universities best evaluated by this ranking are also well evaluated in research, but they are not the best evaluated in citation. This divergence is due to the methodology for scoring universities in the Citation indicator, based on Field-Weighted Citation Impact and which has undergone recent adjustments, including the introduction of the Research Strength metric, aiming to better represent the performance of universities in citation. This research aims to evaluate the new methodology of the Times Higher Education by simulating the calculation of Research Strength. The research is configured as exploratory, quantitative and comparative in that it seeks to expand knowledge about the impact caused by a recently implemented methodology, using position and score data from the rankings, as well as publication and citation data, in addition to its own calculations, comparing the performance of several universities. Data from THE Latin America University Rankings 2022 and the Scival Platform were used. High correlations were found between the Overall, Teaching and Research Scores and low correlation between the Overall and Citation Scores and between Citation Score and Field-Weighted Citation Impact. The simulation carried out among the top 100 universities in THE Latin America University Rankings 2022, using Research Strength, showed that this metric may have the opposite effect to that expected, favoring the best citation performance of universities with many publications with many co-authors.Os rankings são onipresentes no acompanhamento do desempenho das universidades, mas há controvérsias sobre seus procedimentos. Um fato intrigante é a divergência observada entre a posição geral, a posição em pesquisa e a posição em citação ocupada pelas universidades avaliadas pelo THE Latin America University Rankings: as universidades mais bem avaliadas por esse ranking são também bem avaliadas em pesquisa, mas não são as mais bem avaliadas em citação. Essa divergência deve-se à metodologia de pontuação das universidades no indicador Citação, baseada no Field-Weighted Citation Impact e que passou por ajustes recentes, incluindo a introdução da métrica Força de Pesquisa, visando melhor representação do desempenho das universidades em citação. Esta pesquisa tem como objetivo avaliar a nova metodologia do Times Higher Education pela simulação do cálculo da Força da Pesquisa. A pesquisa configura-se como exploratória, quantitativa e comparativa na medida em que busca ampliar o conhecimento sobre o impacto causado por uma metodologia recém implementada, utilizando dados de posição e pontuação dos rankings, assim como dados de publicação e citação, além de cálculos próprios, comparando o desempenho de várias universidades. Foram usados dados do THE Latin America University Rankings 2022 e da Plataforma Scival. Foram comprovadas altas correlações entre as Pontuações Geral, de Ensino e de Pesquisa e baixa correlação entre Pontuação Geral e de Citação e entre Pontuação de Citação e Field-Weighted Citation Impact. A simulação realizada entre as 100 primeiras universidades do THE Latin America University Rankings 2022, utilizando a Força de Pesquisa mostrou que essa métrica pode ter efeito contrário ao esperado, favorecendo o melhor desempenho em citações das universidades com muitas publicações com muitos coautores.Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES)88887.884200/2023-00porUniversidade Federal de São CarlosCâmpus São CarlosPrograma de Pós-Graduação em Ciência da Informação - PPGCIUFSCarAttribution-NonCommercial-NoDerivs 3.0 Brazilhttp://creativecommons.org/licenses/by-nc-nd/3.0/br/info:eu-repo/semantics/openAccessRankings universitáriosBibliometriaCitaçõesUniversity rankingsField-Weighted Citation ImpactBibliometricsCitationCIENCIAS SOCIAIS APLICADAS::CIENCIA DA INFORMACAO::BIBLIOTECONOMIANova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América LatinaNew methodology for the Times Higher Education rankings and citation scores for Latin American universitiesinfo:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisreponame:Repositório Institucional da UFSCARinstname:Universidade Federal de São Carlos (UFSCAR)instacron:UFSCARTEXTNova metodologia dos rankings THE....pdf.txtNova metodologia dos rankings THE....pdf.txtExtracted texttext/plain103448https://repositorio.ufscar.br/bitstreams/42dc9975-970e-4835-92e3-094013547f78/downloadcebbd5fa1db8c2e23de91ab9b9c527b9MD53falseAnonymousREADTHUMBNAILNova metodologia dos rankings THE....pdf.jpgNova metodologia dos rankings THE....pdf.jpgGenerated Thumbnailimage/jpeg3548https://repositorio.ufscar.br/bitstreams/ad6b9a1d-ea8d-48ff-9747-701ba94e0216/downloadd2c718b31ce0723df0a69e8f90e2eb57MD54falseAnonymousREADORIGINALNova metodologia dos rankings THE....pdfNova metodologia dos rankings THE....pdfapplication/pdf3207807https://repositorio.ufscar.br/bitstreams/d2d34ff6-52e3-4192-969c-a988c43b6ef5/download2c83e6002fae213446355913d63b9c44MD51trueAnonymousREADCC-LICENSElicense_rdflicense_rdfapplication/rdf+xml; charset=utf-8905https://repositorio.ufscar.br/bitstreams/29a68b91-2844-4af4-8580-47dec2af8f8f/download57e258e544f104f04afb1d5e5b4e53c0MD52falseAnonymousREAD20.500.14289/213332025-02-07 00:19:24.471http://creativecommons.org/licenses/by-nc-nd/3.0/br/Attribution-NonCommercial-NoDerivs 3.0 Brazilopen.accessoai:repositorio.ufscar.br:20.500.14289/21333https://repositorio.ufscar.brRepositório InstitucionalPUBhttps://repositorio.ufscar.br/oai/requestrepositorio.sibi@ufscar.bropendoar:43222025-02-07T03:19:24Repositório Institucional da UFSCAR - Universidade Federal de São Carlos (UFSCAR)false
dc.title.none.fl_str_mv Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
dc.title.alternative.eng.fl_str_mv New methodology for the Times Higher Education rankings and citation scores for Latin American universities
title Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
spellingShingle Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
Cangiani, Maria Laura Machado
Rankings universitários
Bibliometria
Citações
University rankings
Field-Weighted Citation Impact
Bibliometrics
Citation
CIENCIAS SOCIAIS APLICADAS::CIENCIA DA INFORMACAO::BIBLIOTECONOMIA
title_short Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
title_full Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
title_fullStr Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
title_full_unstemmed Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
title_sort Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina
author Cangiani, Maria Laura Machado
author_facet Cangiani, Maria Laura Machado
author_role author
dc.contributor.authorlattes.none.fl_str_mv http://lattes.cnpq.br/5263317427243364
dc.contributor.authororcid.none.fl_str_mv https://orcid.org/0009-0001-8095-7835
dc.contributor.advisor1orcid.none.fl_str_mv https://orcid.org/0000-0002-8369-1315
dc.contributor.author.fl_str_mv Cangiani, Maria Laura Machado
dc.contributor.advisor1.fl_str_mv Faria, Leandro Innocentini Lopes de
dc.contributor.advisor1Lattes.fl_str_mv http://lattes.cnpq.br/0767710394930118
contributor_str_mv Faria, Leandro Innocentini Lopes de
dc.subject.por.fl_str_mv Rankings universitários
Bibliometria
Citações
topic Rankings universitários
Bibliometria
Citações
University rankings
Field-Weighted Citation Impact
Bibliometrics
Citation
CIENCIAS SOCIAIS APLICADAS::CIENCIA DA INFORMACAO::BIBLIOTECONOMIA
dc.subject.eng.fl_str_mv University rankings
Field-Weighted Citation Impact
Bibliometrics
Citation
dc.subject.cnpq.fl_str_mv CIENCIAS SOCIAIS APLICADAS::CIENCIA DA INFORMACAO::BIBLIOTECONOMIA
description Rankings are ubiquitous in monitoring university performance, but there is controversy about their procedures. One intriguing fact is the divergence observed between the overall position, research position and citation position occupied by the universities evaluated by THE Latin America University Rankings: the universities best evaluated by this ranking are also well evaluated in research, but they are not the best evaluated in citation. This divergence is due to the methodology for scoring universities in the Citation indicator, based on Field-Weighted Citation Impact and which has undergone recent adjustments, including the introduction of the Research Strength metric, aiming to better represent the performance of universities in citation. This research aims to evaluate the new methodology of the Times Higher Education by simulating the calculation of Research Strength. The research is configured as exploratory, quantitative and comparative in that it seeks to expand knowledge about the impact caused by a recently implemented methodology, using position and score data from the rankings, as well as publication and citation data, in addition to its own calculations, comparing the performance of several universities. Data from THE Latin America University Rankings 2022 and the Scival Platform were used. High correlations were found between the Overall, Teaching and Research Scores and low correlation between the Overall and Citation Scores and between Citation Score and Field-Weighted Citation Impact. The simulation carried out among the top 100 universities in THE Latin America University Rankings 2022, using Research Strength, showed that this metric may have the opposite effect to that expected, favoring the best citation performance of universities with many publications with many co-authors.
publishDate 2024
dc.date.issued.fl_str_mv 2024-12-18
dc.date.accessioned.fl_str_mv 2025-02-06T19:30:46Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.citation.fl_str_mv CANGIANI, Maria Laura Machado. Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina. 2024. Dissertação (Mestrado em Ciência da Informação) – Universidade Federal de São Carlos, São Carlos, 2024. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/21333.
dc.identifier.uri.fl_str_mv https://repositorio.ufscar.br/handle/20.500.14289/21333
identifier_str_mv CANGIANI, Maria Laura Machado. Nova metodologia dos rankings Times Higher Education e a pontuação em citações das universidades da América Latina. 2024. Dissertação (Mestrado em Ciência da Informação) – Universidade Federal de São Carlos, São Carlos, 2024. Disponível em: https://repositorio.ufscar.br/handle/20.500.14289/21333.
url https://repositorio.ufscar.br/handle/20.500.14289/21333
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Attribution-NonCommercial-NoDerivs 3.0 Brazil
http://creativecommons.org/licenses/by-nc-nd/3.0/br/
eu_rights_str_mv openAccess
dc.publisher.none.fl_str_mv Universidade Federal de São Carlos
Câmpus São Carlos
dc.publisher.program.fl_str_mv Programa de Pós-Graduação em Ciência da Informação - PPGCI
dc.publisher.initials.fl_str_mv UFSCar
publisher.none.fl_str_mv Universidade Federal de São Carlos
Câmpus São Carlos
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSCAR
instname:Universidade Federal de São Carlos (UFSCAR)
instacron:UFSCAR
instname_str Universidade Federal de São Carlos (UFSCAR)
instacron_str UFSCAR
institution UFSCAR
reponame_str Repositório Institucional da UFSCAR
collection Repositório Institucional da UFSCAR
bitstream.url.fl_str_mv https://repositorio.ufscar.br/bitstreams/42dc9975-970e-4835-92e3-094013547f78/download
https://repositorio.ufscar.br/bitstreams/ad6b9a1d-ea8d-48ff-9747-701ba94e0216/download
https://repositorio.ufscar.br/bitstreams/d2d34ff6-52e3-4192-969c-a988c43b6ef5/download
https://repositorio.ufscar.br/bitstreams/29a68b91-2844-4af4-8580-47dec2af8f8f/download
bitstream.checksum.fl_str_mv cebbd5fa1db8c2e23de91ab9b9c527b9
d2c718b31ce0723df0a69e8f90e2eb57
2c83e6002fae213446355913d63b9c44
57e258e544f104f04afb1d5e5b4e53c0
bitstream.checksumAlgorithm.fl_str_mv MD5
MD5
MD5
MD5
repository.name.fl_str_mv Repositório Institucional da UFSCAR - Universidade Federal de São Carlos (UFSCAR)
repository.mail.fl_str_mv repositorio.sibi@ufscar.br
_version_ 1851688946258411520