Características Psicométricas de uma Avaliação de Matemática
DOI :
https://doi.org/10.23925/2358-4122.2020v7i3p1-27Mots-clés :
Psicometria, Teoria clássica dos testes, Teoria de resposta ao item, Análise de Itens, Avaliação Educacional.Résumé
O Departamento de Matemática da Universidade Federal de Viçosa tem realizado algumas medidas de prevenção à reprovação dos estudantes na disciplina de Cálculo, cujos índices têm assustado os professores. Uma dessas medidas está na elaboração de avaliações de matemática básica que objetivam identificar estudantes propensos à reprovação, a fim de proporcionar uma intervenção pedagógica capaz de reverter esta situação. Tendo em vista a importância desta avaliação como parte integrante dos processos de ensino e aprendizagem da disciplina, o presente artigo tem como objetivo oferecer uma análise estatística, pautada nas duas vertentes da Psicometria moderna: a Teoria Clássica dos Testes (TCT) e a Teoria de Resposta ao Item (TRI), e uma análise pedagógica dos descritores e distratores de alguns itens-chave que compõem uma dessas avaliações, escolhida para um estudo de caso. Os resultados apontaram para uma avaliação composta por itens com variados índices de dificuldade e, no geral, com bom poder discriminativo tanto pela análise via TCT, quanto pela TRI, cujos resultados foram obtidos através da estimação, pelo método da média a posteriori, de um modelo logístico de dois parâmetros. A consistência interna da avaliação como instrumento de mensuração de habilidades foi verificada pelo coeficiente alpha de Cronbach, assegurando a qualidade e confiabilidade dos resultados deste estudo. Espera-se que este trabalho sirva como um instrumento de difusão das teorias psicométricas na análise da estrutura de avaliações e aponte para a necessidade de uma maior discussão pedagógica acerca das possíveis lacunas existentes na aprendizagem de matemática básica dos estudantes do ensino superior.
Métriques
Références
ANDRADE, D. F.; TAVARES, H. R.; VALLE, R. C. Teoria da resposta ao item: conceitos e aplicações. In: SIMPÓSIO NACIONAL DE PROBABILIDADE E ESTATÍSTICA (SINAPE), 14., 2000, Caxambu. Anais... Caxambu: Associação Brasileira de Estatística, 2000. 164 p.
AZEVEDO, C. L. N. Métodos de estimação na teoria de resposta ao item. 2003. 133 p. Dissertação (Mestrado em Estatística) - Universidade de São Paulo, São Paulo. 2003.
BAKER, Frank. The basics of item response theory. Annapolis: University of Maryland, 2001.
BIRNBAUM, A. Some latent trait models and their use in inferring an examinee's ability. In: LORD, Frederic e NOVICK, Melvin. Statistical Theories of Mental Test Scores. Reading, Boston, MA:Addison-Wesley, 1968. p. 397-479.
CHALMERS, P. Mirt: A multidimensional item response theory package for the R environment. Journal of Statistical Software, Innsbruck, Austria, v. 48, n. 6, p. 1-29, maio, 2012.
CONDÉ, F. N. Análise empírica de itens. Technical report, Instituto Nacional de Estudos e Pesquisas Educacionais-DAEB/INEP/MEC, Brasília, 2001.
COUTO, G.; PRIMI, R. Teoria de resposta ao item (TRI): conceitos elementares dos modelos para itens dicotômicos. Boletim de Psicologia, São Paulo, SP, v. 61, n. 134, p. 1-15, dezembro 2011.
EMBRETSON, S.; REISE, S.. Item response theory. Psychology Press, Hove, United Kingdom, 2013. 384 p.
HAIR JÚNIOR, J.; BLACK, W.; BABIN, B.; ANDERSON, R. Multivariate data analysis. 7a ed. Upper Saddle River, New Jersey: Prentice Hall, 2010.
LOPES, A. Algumas reflexões sobre a questão do alto índice de reprovação nos cursos de Cálculo da UFRGS. Matemática Universitária. Rio de Janeiro, RJ, n.2, v. 26/27, p. 123-146, junho, 1999.
LOPES, F. L.; VENDRAMINI, C. M. M. Propriedades psicométricas das provas de pedagogia do ENADE via TRI. Avaliação: Revista da Avaliação da Educação Superior. Sorocaba, v. 20, n. 1, p. 27-47, 2015.
OLIVEIRA, A. L. S. Avaliação psicométrica da medida do componente de formação geral da prova do exame nacional de desempenho de estudantes (ENADE) de 2010, 2011 e 2012. 2017. 107 p. Dissertação (Mestrado em Métodos e Gestão em Avaliação.) - Universidade Federal de Santa Catarina, Florianópolis. 2017.
PASQUALI, L. Psicometria: teoria dos testes na psicologia e na educação. Petrópolis: Vozes, 2003. 397 p.
PIACENTINI, C. C. Reprovação, abandono evasão: um estudo de caso no curso de bacharelado em zootecnia da Universidade Tecnológica Federal do Paraná–Campus Dois Vizinhos. 2012. 115 p. Dissertação (Mestrado em Ciências) - Universidade Federal Rural do Rio de Janeiro, Seropédica. 2012.
PRIMI, R.; HUTZ, C.; SILVA, M. C. R. A prova do ENADE de psicologia 2006: concepção, construção e análise psicométrica da prova. Avaliação Psicológica, Campinas, v. 10, n. 3, p. 271-294, 2011.
R DEVELOPMENT CORE TEAM. R: A Language and Environment for Statistical Computing. Vienna: R Foundation on Statistical Computing, 2019. Disponível em:
https://www.r-project.org. Acesso: 02/03/2019.
RASCH, G. Probabilistic models for some intelligence and achievement tests. Copenhagen: Danish Institute for Education Research, 1960.
RIZOPOULOS, D. Ltm: An R package for latent variable modeling and item response analysis. Journal of statistical software, Innsbruck, Austria, v. 17, n. 5, p. 125, novembro, 2006.
ROSA, C. de M.; RIBEIRO, R. Acesso, retenção e evasão: os contornos da exclusão na Universidade Federal de Goiás. Cadernos de Pesquisa, v. 25, n. 3, p. 185-203, 2018.
VASCONCELOS, R.; ALMEIDA, L.; MONTEIRO, S. O insucesso e abandono acadêmico na universidade: Uma análise sobre os cursos de engenharia. In: International Conference on Engineering and Computer Education. Anais... Buenos Aires: ICECE, cop. 2009. p. 457-461.
VELOSO, T. C., ALMEIDA, E. P. Evasão nos cursos de graduação da Universidade Federal de Mato Grosso, Campus Universitário de Cuiabá–um processo de exclusão. Série-Estudos-Periódico do Programa de Pós-Graduação em Educação da UCDB, v. 1, n. 13, p. 133-148, 2013.
WISLAND, B.; FREITAS, M. do C. D.; ISHIDA, C. Y. Desempenho acadêmico dos alunos em curso de engenharia e licenciatura na disciplina de Cálculo I. Iberoamerican Journal of Industrial Engineering, Florianópolis, SC, v. 6, n. 11, p. 94-112, julho, 2014.
Téléchargements
Fichiers supplémentaires
Publiée
Comment citer
Numéro
Rubrique
Licence
Este obra está licenciado com uma Licença Creative Commons Atribuição 4.0 Internacional.