A validade segundo psicometristas e linguistas aplicados e as entrevistas de proficiência oral

Authors

DOI:

https://doi.org/10.23925/2318-7115.2020v41i5a2

Keywords:

validade, avaliação em línguas, entrevistas de proficiência oral

Abstract

Psicometristas e linguistas aplicados colaboram para o debate sobre as avaliações de línguas; os primeiros são especialistas em como medir; e os segundos, em o quê medir. Neste artigo, argumento que há uma tensão entre os dois grupos em torno da definição do conceito de validade. Apresento uma breve revisão do conceito de validade a partir da perspectiva da psicometria de forma a relacioná-lo com as definições de validade apresentadas por linguistas aplicados, especialistas em avaliação de línguas. Em seguida, exemplifico o debate sobre a validade no contexto das avaliações de proficiência oral a partir dos conceitos de autenticidade, teste direto e indireto nos dois maiores exames de larga escala da América do Sul: o Celpe-Bras e o Celu. Ao final, argumento que os linguistas aplicados tendem a debater a validade a partir do desenho dos instrumentos, eclipsando a necessidade de levantar evidências empíricas sobre como o desenho da prova interage com outros aspectos do teste.

Metrics

Metrics Loading ...

Author Biography

Laura Márcia Luiza Ferreira, Professora Adjunta na Universidade Federal da Integração Latino-Americana (UNILA)

É professora na Universidade Federal da Integração Latino-Americana (UNILA) em Foz do Iguaçu, Paraná. Doutora em Estudos de Linguagens pelo Programa de Pós-graduação do Cefet-MG, mestre em linguística aplicada pela UFMG e licenciada em Letras (Português/Francês) pela mesma instituição. Foi Professora-Leitora de Língua Portuguesa e Cultura Brasileira junto ao Programa de Leitorado do Ministério das Relações Exteriores na Universidade de Chulalongkorn, na Tailândia. Foi Professora de Língua Portuguesa Instrumental em Timor-Leste no âmbito do programa brasileiro de cooperação educacional.

References

AMERICAN EDUCATIONAL RESEARCH ASSOCIATION; AMERICAN PSYCHOLOGICAL ASSOCIATION; NATIONAL COUNCIL ON MEASUREMENT IN EDUCATION. 2014 Standards for educational and psychological testing. Nova Iorque: AERA.

BACHMAN, Lyle F. 1990 Fundamental considerations in language testing. Oxford: Oxford University Press.

BACHMAN, Lyle F.; PALMER, Adrien S. 1996 Language testing in practice: designing and developing useful language tests. Oxford: Oxford University Press.

BRASIL. 2016 Ministério da Educação. Secretaria de Ensino Superior. Certificado de Proficiência em Língua Portuguesa para Estrangeiros: Roteiro de Interação. Brasília.

BROWN, H. Douglas; ABEYWICKRAMA, Priyanvada. 2010 Language Assessment: principles and classroom practice. Nova Iorque: Longman Pearson.

BROWN, Annie. 2005 Interviewer variability in oral proficiency interviews. Frankfurt: PeterLang.

BYGATE, Martin. 2011 Teaching and testing speaking. In: LONG, Michael H.; DOUGHTY, Catherine J. The handbook of language teaching. Chichester: Wiley-Blackwell. p.411-440

CHAMBERS, Francine. 1997. What do we mean by fluency? System, v.25, n.4, p.535-544.

CONSOLO, Douglas A. 2005 Postura sobre avaliação de proficiência oral do professor de língua estrangeira: implicações para o cenário brasileiro. IN: FREIRE, M.M.; VIERA-ABRAHÃO, M.H.; BARCELOS, A.M.F. Linguística Aplicada e contemporaneidade. São Paulo: ALAB, Pontes Editores.

DELL’ISOLA, Regina L. Péret; SCARAMUCCI, Matilde V.R.; SCHLATTER, Margarete; JÚDICE, Norimar. 2003 A avaliação de proficiência em português língua estrangeira: o exame CELPE-Bras. Revista Brasileira de Linguística Aplicada, Belo Horizonte, v.3, n.1, p.153-184.

ECKES, Thomas. 2015 Introduction to many-facet rasch measurement: analyzing and evaluating rater-mediated assessments. Frankfurt: PeterLang.

ELSE, Consorcio Español como Lengua Segunda y Extranjera. 2019 Dispõe informações sobre: exame CELU, Certificado de Español Lengua y Uso. Disponível em: https://www.celu.edu.ar/es/content/actividades-del-examen- Acesso em: 11 jun. 2019.

FERREIRA, Laura Márcia Luiza. Avaliação da proficiência oral: uma análise fatorial e de discriminação de itens do exame Celpe-Bras. Tese de Doutorado. 244f. Belo Horizonte: CEFET-MG, 2018.

_________. Validade de conteúdo e especificação das propostas de interação oral dos exames Celpe-Bras e CELU. IN: BARROSO, Silvina; DANDREA, Fabio. X Coloquio CELU: enseñanza y evaluación ELSE: aportes para una politica orientada a la integración regional. Río Cuarto: UniRío Editora (Universidad Nacional de Río Cuarto), 2019. p.23-37

FULCHER, Glenn. Testing second language speaking. Londres: Routledge, 2003.

FULCHER, Gleenn; DAVIDSON, Fred. 2007 Language testing and assessment: an advanced resource book. Routledge: Nova Iorque. p.91-114

GRABE, William; STOLLER, Fredricka L. 2002 Teaching and researching reading. Harlow, England: Pearson Education, Longman.

HYMES, D. 1972 On Communicative Competence. In PRIDE, J. B. e HOLMES, J. Sociolinguistics. England: Penguin Books. 381 p.

HUGHES, Arthur. 1989 Testing for language teachers. Cambridge: Cambridge University Press.

JOHNSON, Marysia. 2001 The art of non-conversation: a reexamination of the validity of the oral proficiency interview. Yale Haven & London: Yale University Press.

LUCKESI, Cipriano Carlos. 2011 Avaliação da aprendizagem escolar: estudos e proposições. 22ed. São Paulo: Editora Cortez.

NATION, Paul. 1989 Improving speaking fluency. System, v.17, n.3, p.377-384.

McNAMARA, Tim. 2000 Language Testing. Oxford: Oxford University Press.

McNAMARA, Tim. 2004 Language Testing. In: DAVIES, Alan; ELDER, Catherine. The handbook of applied linguistics.

MCNAMARA,Tim. 2008 Language assessment as social practice. IN: IV COLOQUIO CELU, Universidad de San Martín, Buenos Aires. Anais eletrônicos...Buenos aires: Universidad de San Martín, 2008. Disponível em: https://www.celu.edu.ar/sites/www.celu.edu.ar/files/images/stories/pdf/McNamara_conferencia_.pdf Acesso em: 01 de mai. 2019

MESSICK, Samuel. 1987 Validity. Nova Jersey: Educational Testing Service Princeton.

MESSICK, Samuel. 1996 Validity and Washback in Language Testing. Language Testing, v. 13, n.3, p.241–256., nov., p.241–256. Doi:10.1177/026553229601300302

NEVES, Liliane Oliveira. 2018 Confiabilidade e comportamento avaliativo na prova oral do exame Celpe-Bras: um estudo longitudinal. Tese de Doutorado. Belo Horizonte: CEFET-MG.

SCARAMUCCI, Matilde. V. R.. 2001 O Projeto Celpe-Bras no Âmbito do Mercosul: contribuições para uma definição de proficiência comunicativa. In: ALMEIDA FILHO, J.C.P (Org.) Português para Estrangeiros Interface com o Espanhol. 2.ed. Campinas: Pontes. p. 77-90

SCHLATTER, M. ; Scaramucci, Matilde V. Ricardi ; PRATI, S. 2008 Celpe-Bras and CELU proficiency exams as political acts in Brazil and Argentina. In: ALTE 3rd - International Conference Cambridge 2008, Cambridge. Programme of the ALTE 3rd - International Conference Cambridge 2008. Cambridge, 2008. v. 1.

SCHOFFEN, Juliana Roquele. 2009 Gêneros do discurso e parâmetros de avaliação de proficiência em português como língua estrangeira no exame Celpe-Bras. Tese de Doutorado. Porto Alegre: UFRGS.

SHOHAMY, Elana. 2000 Assessment. IN: CELCE-MURCIA, Marianne; OLSHTAIN, Elite. Discourse and context in language teaching: a guide for language teachers. Cambridge: Cambridge University Press. p. 201-215.

Downloads

Published

2020-12-31

How to Cite

Ferreira, L. M. L. (2020). A validade segundo psicometristas e linguistas aplicados e as entrevistas de proficiência oral. The ESPecialist, 41(5). https://doi.org/10.23925/2318-7115.2020v41i5a2

Issue

Vol. 41 No. 5 (2020)

Section

Papers

License

The authors grant the journal all copyrights relating to the published works. The concepts issued in signed articles are the absolute and exclusive responsibility of their authors.