Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012

Detalhes bibliográficos
Ano de defesa: 2015
Autor(a) principal: Pedroza, Katia Neves
Orientador(a): Borgatto, Adriano Ferreti
Banca de defesa: Não Informado pela instituição
Tipo de documento: Dissertação
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Não Informado pela instituição
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Link de acesso: https://repositorio.ufsc.br/xmlui/handle/123456789/160761
Resumo: Dissertação (mestrado profissional) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Métodos e Gestão em Avaliação, Florianópolis, 2015
id UFSC_b78e2916d8d10a75f49eef06689a3ecb
oai_identifier_str oai:repositorio.ufsc.br:123456789/160761
network_acronym_str UFSC
network_name_str Repositório Institucional da UFSC
repository_id_str
spelling Universidade Federal de Santa CatarinaPedroza, Katia NevesBorgatto, Adriano Ferreti2016-04-19T04:17:56Z2016-04-19T04:17:56Z2015337946https://repositorio.ufsc.br/xmlui/handle/123456789/160761Dissertação (mestrado profissional) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Métodos e Gestão em Avaliação, Florianópolis, 2015O presente trabalho teve como objetivo comparar as avaliações educacionais em papel e em computador tendo como base as provas de Matemática do PISA 2012. Mais precisamente, analisou o efeito do modo de aplicação nos dois lados do processo: no instrumento e no avaliando, pelo estudo da dimensionalidade das provas e da comparação tanto das médias de grupos específicos, quanto do nível de dificuldade dos itens. Para as duas primeiras análises, foram utilizadas as respostas dos 1.390 alunos brasileiros que fizeram parte da amostra e que realizaram a prova de Matemática nos dois formatos. A avaliação do número de dimensões foi feita pelo método de análise fatorial de informação completa e o ajuste dos itens aos fatores revelou um conjunto predominantemente unidimensional, indicando a equivalência das provas nesse quesito. A comparação das médias considerou características individuais dos alunos e das escolas: posse de computadores, sexo, ano de ensino e localização da escola (urbana/rural; região/estado), demonstrando o impacto positivo das provas em computador no desempenho dos alunos de quase todos os grupos avaliados. A discussão do nível de dificuldade dos itens foi realizada através de uma análise quali-quantitativa, que levou em conta o posicionamento dos alunos e dos itens na escala geral de Matemática, bem como a dificuldade dos itens em papel e em computador da categoria de conteúdo Espaço e Forma classificados na mesma categoria de processo e contexto. O posicionamento dos 125 itens (84 em papel e 41 em computador) que fizeram parte do estudo indicou que, em geral, a prova em computador foi mais difícil que a prova em papel e que um número muito reduzido de itens em computador estavam adequados ao nível de proficiência da maioria dos alunos brasileiros, sugerindo uma possível superestimação das médias de proficiência nesse modo de aplicação, com impacto ainda maior nos grupos de baixo desempenho. As características distintas dos itens não permitiram obter resultados mais conclusivos quanto à comparabilidade dos dois modos de aplicação.<br>Abstract : This study aimed to verify the comparability of educational assessments in both paper-based and computer-based formats based on the evidence of PISA 2012 Mathematics tests. More precisely, it examined the effect of the application mode on both sides of the process: in the instrument and in the examinees by the study of the dimensionality of the tests and by the comparison of the specific groups means and the level of items difficulty. For the first two analyzes, the responses of the 1.390 Brazilian students who were part of the sample and did the Mathematics tests in both formats were used. The evaluation of the number of dimensions was taken by the full information factor analysis and the adjustment of the items to the factors revealed a predominantly unidimensional set, indicating the equivalence of the tests in this matter. The comparison of means considered individual characteristics of the students and the schools: computers possession, sex, school year and school location (urban/rural, region/state), demonstrating the positive impact of the computer tests in students' performance in almost all groups evaluated. The discussion about the items difficulty level was accomplished through a qualitative and quantitative analysis, which considered the position of students and items in the Mathematics general scale as well as the difficulty of the paper and computer items of the content category Space and Shape classified under the same category of process and context. The position of the 125 items (84 in paper and 41 in computer) that were part of the study indicated that, in general, the computer-based test was more difficult than the paper-based test and that a very small number of items in computer were adequate to the proficiency level of most Brazilian students, suggesting a possible overestimation of proficiency average in this application mode, with even greater impact on the underperforming groups. The items' distinct characteristics did not allow to obtain more conclusive results regarding the comparability of the two application modes.151 p.| il., grafs., tabs.porAvaliação educacionalTestes e medidas educacionaisTeoria da Resposta do ÍtemComparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/masterThesisreponame:Repositório Institucional da UFSCinstname:Universidade Federal de Santa Catarina (UFSC)instacron:UFSCinfo:eu-repo/semantics/openAccessORIGINAL337946.pdfapplication/pdf2934284https://repositorio.ufsc.br/bitstream/123456789/160761/1/337946.pdf5a9c1b2c03a654d79a44ac797b98009eMD51123456789/1607612016-04-19 01:17:56.99oai:repositorio.ufsc.br:123456789/160761Repositório InstitucionalPUBhttp://150.162.242.35/oai/requestsandra.sobrera@ufsc.bropendoar:23732016-04-19T04:17:56Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)false
dc.title.pt_BR.fl_str_mv Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
title Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
spellingShingle Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
Pedroza, Katia Neves
Avaliação educacional
Testes e medidas educacionais
Teoria da Resposta do Ítem
title_short Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
title_full Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
title_fullStr Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
title_full_unstemmed Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
title_sort Comparabilidade das avaliações educacionais em papel e em computador : um estudo do pisa 2012
author Pedroza, Katia Neves
author_facet Pedroza, Katia Neves
author_role author
dc.contributor.pt_BR.fl_str_mv Universidade Federal de Santa Catarina
dc.contributor.author.fl_str_mv Pedroza, Katia Neves
dc.contributor.advisor1.fl_str_mv Borgatto, Adriano Ferreti
contributor_str_mv Borgatto, Adriano Ferreti
dc.subject.classification.pt_BR.fl_str_mv Avaliação educacional
Testes e medidas educacionais
Teoria da Resposta do Ítem
topic Avaliação educacional
Testes e medidas educacionais
Teoria da Resposta do Ítem
description Dissertação (mestrado profissional) - Universidade Federal de Santa Catarina, Centro Tecnológico, Programa de Pós-Graduação em Métodos e Gestão em Avaliação, Florianópolis, 2015
publishDate 2015
dc.date.issued.fl_str_mv 2015
dc.date.accessioned.fl_str_mv 2016-04-19T04:17:56Z
dc.date.available.fl_str_mv 2016-04-19T04:17:56Z
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/masterThesis
format masterThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv https://repositorio.ufsc.br/xmlui/handle/123456789/160761
dc.identifier.other.pt_BR.fl_str_mv 337946
identifier_str_mv 337946
url https://repositorio.ufsc.br/xmlui/handle/123456789/160761
dc.language.iso.fl_str_mv por
language por
dc.rights.driver.fl_str_mv info:eu-repo/semantics/openAccess
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv 151 p.| il., grafs., tabs.
dc.source.none.fl_str_mv reponame:Repositório Institucional da UFSC
instname:Universidade Federal de Santa Catarina (UFSC)
instacron:UFSC
instname_str Universidade Federal de Santa Catarina (UFSC)
instacron_str UFSC
institution UFSC
reponame_str Repositório Institucional da UFSC
collection Repositório Institucional da UFSC
bitstream.url.fl_str_mv https://repositorio.ufsc.br/bitstream/123456789/160761/1/337946.pdf
bitstream.checksum.fl_str_mv 5a9c1b2c03a654d79a44ac797b98009e
bitstream.checksumAlgorithm.fl_str_mv MD5
repository.name.fl_str_mv Repositório Institucional da UFSC - Universidade Federal de Santa Catarina (UFSC)
repository.mail.fl_str_mv sandra.sobrera@ufsc.br
_version_ 1851758848425066496