Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia

Detalhes bibliográficos
Ano de defesa: 2013
Autor(a) principal: Martins, Teresa Helena Buscato
Orientador(a): Não Informado pela instituição
Banca de defesa: Não Informado pela instituição
Tipo de documento: Tese
Tipo de acesso: Acesso aberto
Idioma: por
Instituição de defesa: Biblioteca Digitais de Teses e Dissertações da USP
Programa de Pós-Graduação: Não Informado pela instituição
Departamento: Não Informado pela instituição
País: Não Informado pela instituição
Palavras-chave em Português:
Link de acesso: http://www.teses.usp.br/teses/disponiveis/48/48134/tde-28062013-162731/
Resumo: Este trabalho tem por objetivo coletar e analisar evidências relacionadas a um teste de classificação em Inglês, mediado por computador, aplicado em uma Faculdade de Tecnologia Pública que está localizada a 60 km da capital de São Paulo. Os dados obtidos foram coletados nos testes de classificação aplicados a alunos ingressantes dos cursos de Eventos, Logística (manhã e noite) e de Gestão da Tecnologia da Informação, no período compreendido entre o 2º semestre de 2010 ao 2º semestre de 2012. Outros dados complementares foram obtidos em dois questionários de apreciação da prova, um deles respondido por 141 (cento e quarenta e um) ingressantes no 1º semestre de 2012 e o outro por dois professores de inglês da instituição, que serviram de base para o estudo da validação do teste. O propósito da pesquisa foi o de avaliar a pertinência e qualidade dos itens que compõem cada nível dos testes de classificação, em comparação com o que está previsto como conteúdo programático de língua inglesa nos cursos, apresentado nas ementas das disciplinas Inglês I a VI. A pesquisa foi tratada como um estudo de caso, de caráter descritivo e exploratório, considerando para análise dados quantitativos e qualitativos, com o objetivo de verificar e discutir a validade de construto, de conteúdo e de face nos testes de classificação, consideradas como aspectos substanciais para o processo de sua validação. Os resultados da análise comparativa revelaram que o teste necessita de modificações, uma vez que o construto que permeia as ementas dos cursos não está nitidamente definido no teste, especialmente no que se refere à ausência do componente oral em alguns dos seus níveis. Entretanto, quanto à validade de conteúdo, observou-se que a maioria dos itens contempla o que está previsto nas ementas. Em relação à validade de face, os resultados apontarem que os examinandos e professores que participaram da pesquisa consideraram o teste adequado. A análise do desempenho dos examinandos e a avaliação dos itens do teste permitiram diagnosticar aspectos das práticas avaliativas da instituição e sua relevância para o processo ensino/aprendizagem de língua estrangeira. Nesse sentido, espera-se que este trabalho possa contribuir para futuras pesquisas sobre elaboração, processamento e validação de instrumentos avaliativos em língua estrangeira.
id USP_a69658bd6c9b2d6f9c408b622cdec4c8
oai_identifier_str oai:teses.usp.br:tde-28062013-162731
network_acronym_str USP
network_name_str Biblioteca Digital de Teses e Dissertações da USP
repository_id_str
spelling Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologiaAnalysis and validation of a placement test in English: a case study in technological coursesAssessmentAvaliaçãoConstruct validityContent validityPlacement testTest validationTeste de classificaçãoValidação de testesValidade de construtoValidade de conteúdoEste trabalho tem por objetivo coletar e analisar evidências relacionadas a um teste de classificação em Inglês, mediado por computador, aplicado em uma Faculdade de Tecnologia Pública que está localizada a 60 km da capital de São Paulo. Os dados obtidos foram coletados nos testes de classificação aplicados a alunos ingressantes dos cursos de Eventos, Logística (manhã e noite) e de Gestão da Tecnologia da Informação, no período compreendido entre o 2º semestre de 2010 ao 2º semestre de 2012. Outros dados complementares foram obtidos em dois questionários de apreciação da prova, um deles respondido por 141 (cento e quarenta e um) ingressantes no 1º semestre de 2012 e o outro por dois professores de inglês da instituição, que serviram de base para o estudo da validação do teste. O propósito da pesquisa foi o de avaliar a pertinência e qualidade dos itens que compõem cada nível dos testes de classificação, em comparação com o que está previsto como conteúdo programático de língua inglesa nos cursos, apresentado nas ementas das disciplinas Inglês I a VI. A pesquisa foi tratada como um estudo de caso, de caráter descritivo e exploratório, considerando para análise dados quantitativos e qualitativos, com o objetivo de verificar e discutir a validade de construto, de conteúdo e de face nos testes de classificação, consideradas como aspectos substanciais para o processo de sua validação. Os resultados da análise comparativa revelaram que o teste necessita de modificações, uma vez que o construto que permeia as ementas dos cursos não está nitidamente definido no teste, especialmente no que se refere à ausência do componente oral em alguns dos seus níveis. Entretanto, quanto à validade de conteúdo, observou-se que a maioria dos itens contempla o que está previsto nas ementas. Em relação à validade de face, os resultados apontarem que os examinandos e professores que participaram da pesquisa consideraram o teste adequado. A análise do desempenho dos examinandos e a avaliação dos itens do teste permitiram diagnosticar aspectos das práticas avaliativas da instituição e sua relevância para o processo ensino/aprendizagem de língua estrangeira. Nesse sentido, espera-se que este trabalho possa contribuir para futuras pesquisas sobre elaboração, processamento e validação de instrumentos avaliativos em língua estrangeira.The objective of this study is to collect and analyze evidences related to an online English placement test which is being administered in a public technological college located 60 km from the capital of São Paulo. Data were collected on this test administered to freshmen students of Events, Logistics (morning and evening) and Management Information Technology courses in the period between the second half of 2010 to the second half of 2012. Other complementary data were obtained by two questionnaires, one of them answered by 141 freshmen in the first half of 2012 and the other answered by two English teachers of the college, which formed the basis for the study of the validation of the test. The purpose of the research was to assess the relevance and quality of the test items that make up each level of the placement test in comparison to what is foreseen as syllabus for English language courses I through VI. The research was treated as a case study, with a descriptive and explanatory character considering quantitative and qualitative data analysis in order to verify and discuss the construct validity, content validity and face validity of the online placement test considered as substantial aspects for process validation. The results of the comparative analysis revealed that the online placement test requires modifications, since the construct that permeates the syllabus of the courses is not clearly defined in the test, particularly there is an oral missing evaluation in some levels. However, as to content validity, it was observed that most of the items that are part of the test include what is referred to on the syllabus. Regarding face validity the results suggest that most of the examinees and teachers who participated in the survey considered the test appropriate. The performance analysis and evaluation of the examinees and the way the test was constructed helped diagnosing aspects of evaluation practices in the institution and its relevance to the teaching / learning of a foreign language. We intend through this study to contribute to the current research on development, implementation and validation of evaluation instruments in a foreign language.Biblioteca Digitais de Teses e Dissertações da USPFerro, Glaucia Dolim MaroteMartins, Teresa Helena Buscato2013-04-29info:eu-repo/semantics/publishedVersioninfo:eu-repo/semantics/doctoralThesisapplication/pdfhttp://www.teses.usp.br/teses/disponiveis/48/48134/tde-28062013-162731/reponame:Biblioteca Digital de Teses e Dissertações da USPinstname:Universidade de São Paulo (USP)instacron:USPLiberar o conteúdo para acesso público.info:eu-repo/semantics/openAccesspor2016-07-28T16:10:36Zoai:teses.usp.br:tde-28062013-162731Biblioteca Digital de Teses e Dissertaçõeshttp://www.teses.usp.br/PUBhttp://www.teses.usp.br/cgi-bin/mtd2br.plvirginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.bropendoar:27212016-07-28T16:10:36Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)false
dc.title.none.fl_str_mv Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
Analysis and validation of a placement test in English: a case study in technological courses
title Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
spellingShingle Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
Martins, Teresa Helena Buscato
Assessment
Avaliação
Construct validity
Content validity
Placement test
Test validation
Teste de classificação
Validação de testes
Validade de construto
Validade de conteúdo
title_short Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
title_full Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
title_fullStr Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
title_full_unstemmed Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
title_sort Análise e validação de um teste de classificação em inglês: um estudo de caso em cursos superiores em tecnologia
author Martins, Teresa Helena Buscato
author_facet Martins, Teresa Helena Buscato
author_role author
dc.contributor.none.fl_str_mv Ferro, Glaucia Dolim Marote
dc.contributor.author.fl_str_mv Martins, Teresa Helena Buscato
dc.subject.por.fl_str_mv Assessment
Avaliação
Construct validity
Content validity
Placement test
Test validation
Teste de classificação
Validação de testes
Validade de construto
Validade de conteúdo
topic Assessment
Avaliação
Construct validity
Content validity
Placement test
Test validation
Teste de classificação
Validação de testes
Validade de construto
Validade de conteúdo
description Este trabalho tem por objetivo coletar e analisar evidências relacionadas a um teste de classificação em Inglês, mediado por computador, aplicado em uma Faculdade de Tecnologia Pública que está localizada a 60 km da capital de São Paulo. Os dados obtidos foram coletados nos testes de classificação aplicados a alunos ingressantes dos cursos de Eventos, Logística (manhã e noite) e de Gestão da Tecnologia da Informação, no período compreendido entre o 2º semestre de 2010 ao 2º semestre de 2012. Outros dados complementares foram obtidos em dois questionários de apreciação da prova, um deles respondido por 141 (cento e quarenta e um) ingressantes no 1º semestre de 2012 e o outro por dois professores de inglês da instituição, que serviram de base para o estudo da validação do teste. O propósito da pesquisa foi o de avaliar a pertinência e qualidade dos itens que compõem cada nível dos testes de classificação, em comparação com o que está previsto como conteúdo programático de língua inglesa nos cursos, apresentado nas ementas das disciplinas Inglês I a VI. A pesquisa foi tratada como um estudo de caso, de caráter descritivo e exploratório, considerando para análise dados quantitativos e qualitativos, com o objetivo de verificar e discutir a validade de construto, de conteúdo e de face nos testes de classificação, consideradas como aspectos substanciais para o processo de sua validação. Os resultados da análise comparativa revelaram que o teste necessita de modificações, uma vez que o construto que permeia as ementas dos cursos não está nitidamente definido no teste, especialmente no que se refere à ausência do componente oral em alguns dos seus níveis. Entretanto, quanto à validade de conteúdo, observou-se que a maioria dos itens contempla o que está previsto nas ementas. Em relação à validade de face, os resultados apontarem que os examinandos e professores que participaram da pesquisa consideraram o teste adequado. A análise do desempenho dos examinandos e a avaliação dos itens do teste permitiram diagnosticar aspectos das práticas avaliativas da instituição e sua relevância para o processo ensino/aprendizagem de língua estrangeira. Nesse sentido, espera-se que este trabalho possa contribuir para futuras pesquisas sobre elaboração, processamento e validação de instrumentos avaliativos em língua estrangeira.
publishDate 2013
dc.date.none.fl_str_mv 2013-04-29
dc.type.status.fl_str_mv info:eu-repo/semantics/publishedVersion
dc.type.driver.fl_str_mv info:eu-repo/semantics/doctoralThesis
format doctoralThesis
status_str publishedVersion
dc.identifier.uri.fl_str_mv http://www.teses.usp.br/teses/disponiveis/48/48134/tde-28062013-162731/
url http://www.teses.usp.br/teses/disponiveis/48/48134/tde-28062013-162731/
dc.language.iso.fl_str_mv por
language por
dc.relation.none.fl_str_mv
dc.rights.driver.fl_str_mv Liberar o conteúdo para acesso público.
info:eu-repo/semantics/openAccess
rights_invalid_str_mv Liberar o conteúdo para acesso público.
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.coverage.none.fl_str_mv
dc.publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
publisher.none.fl_str_mv Biblioteca Digitais de Teses e Dissertações da USP
dc.source.none.fl_str_mv
reponame:Biblioteca Digital de Teses e Dissertações da USP
instname:Universidade de São Paulo (USP)
instacron:USP
instname_str Universidade de São Paulo (USP)
instacron_str USP
institution USP
reponame_str Biblioteca Digital de Teses e Dissertações da USP
collection Biblioteca Digital de Teses e Dissertações da USP
repository.name.fl_str_mv Biblioteca Digital de Teses e Dissertações da USP - Universidade de São Paulo (USP)
repository.mail.fl_str_mv virginia@if.usp.br|| atendimento@aguia.usp.br||virginia@if.usp.br
_version_ 1815258532389322752