Analysis of simulated interactions of the oral test of the Celpe-Bras exam
DOI:
https://doi.org/10.23925/2318-7115.2024v45i4e64984Keywords:
Celpe-Bras, Oral exam, SimulatedAbstract
This article aims to analyze the justifications of the grades of interlocutor evaluators and observer evaluators in a simulated face-to-face interaction of the Celpe-Bras exam. The evaluators are 3 undergraduate students who work at the Nucleus of Languages without Borders of the State University of Feira de Santana (NucLi-isf/UEFS) in a preparatory course for the Celpe-Bras exam. Each teacher conducted 4 semi-structured interviews at the end of each simulated interaction, in order to ensure possible meetings with each of the examinees. The results show a high level of similarity in grading, but distinct criteria of judgment in at least half of the meetings. The results reveal a high level of similarity in the attribution of grades, but different classification criteria. There was also uncertainty regarding the score presented, giving rise to a debate around the subjectivity of the evaluation and the importance of better refining the criteria to increase the reliability of the process.
Metrics
References
ANUNCIAÇÃO, R. F. M. de. CAMARGO, H. R. E. de. O exame Celpe-Bras como política gatekeeping para a naturalização no Brasil. Muiraquitã: Revista de Letras e Humanidades, São Paulo, v. 7, n. 2, p. 10-22, 2019. Disponível em: https://teste-periodicos.ufac.br/index.php/mui/article/view/2764 . Acesso em: 20 de jul. 2023
BOSKER H. R. et al. The perception of fluency in native and nonnative speech. Language Learning, Michigan, v. 64, n. 3, p. 579–614, 2014. Disponível em: https://onlinelibrary.wiley.com/doi/epdf/10.1111/lang.12067 . Acesso em: 07 nov. 2023.
BOTTURA, E. B. Exame Celpe-Bras: uma investigação sobre o papel do entrevistador na interação face a face. 2014. Dissertação (Mestrado em Linguística) - Universidade Federal de São Carlos, São Carlos, 2018.
BRASIL. Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira — Inep. Certificado de proficiência em Língua Portuguesa para Estrangeiros — Manual do Examinando. Brasília: MEC/Inep/Daeb, 2015. Disponível em: http://www.ufrgs.br/acervocelpebras/arquivos/manuais/manual-do-examinando-2015 . Acesso em: 24 nov. 2023.
BRASIL. Ministério da Educação. Secretaria de Ensino Superior. Documento base do exame Celpe-Bras. Brasília, 2020. Disponível em: https://www.ufrgs.br/acervocelpebras/wp- content/uploads/2021/12/Documento-base-do-exame-Celpe-Bras-2020.pdf Acesso em: 21 de abril de 2023.
BRASIL. Celpe-Bras. Histórico. Disponível em https://www.gov.br/inep/pt-br/areas-deatuacao/avaliacao-e-exames-educacionais/celpe-bras/historico Acesso em 31 out. 2023.
CROCKER, R. A. An introduction to qualitative research. In: HEIGHAM, J.; CROCKER, R. A. Qualitative research in Applied Linguistics: a pratical introduction. London: Palgrave Macmillan, 2009, p. 3-24.
DELL’ISOLLA, R. L. P. et al. A avaliação de proficiência em português língua estrangeira: o exame CELPE-Bras. Rev. Brasileira de Linguística Aplicada, v. 3, n. 1, p. 153-184, 2003. Disponível em: https://www.scielo.br/j/rbla/a/3NJgKW795HBhL7zbTNQrTWz/?format=pdf&lang=pt . Acesso em: 14 nov. 2023.
DUIJIM, K.; SCHOONEM, R.; HULSTJIN, J. H. Professional and non-professional raters’ responsiveness to fluency and accuracy in L2 speech: An experimental approach. Language Testing, v. 35, n. 4, p. 501-527, 2018. Disponível em: https://journals.sagepub.com/doi/epub/10.1177/0265532217712553 . Acesso em: 07 nov. 2023
FARIA, E. R.; GATTOLIN, S. R. B. Avaliação da proficiência oral em língua portuguesa como língua estrangeira: um olhar para a interação face a face do exame Celpe-Bras. Revista Linguasagem, São Carlos, v. 39, n.1, p. 213-233, 2021. Disponível em: http://www.ileel.ufu.br/anaisdosielp/wp-content/uploads/2014/07/volume_2_artigo_168.pdf . Acesso em: 29 de abril de 2023.
FERREIRA, L. M. L. Avaliação da proficiência oral: uma análise fatorial e de discriminação dos itens do exame Celpe-Bras. 2018. Tese. (Doutorado em Estudo de Linguagens) – Centro Federal de Educação Tecnológica de Minas Gerais, Belo Horizonte, 2018.
HAYES-HARB, R.; HACKING, J. F. Beyond rating data: What do listeners believe underlies their accentedness judgments? Journal of Second Language Pronunciation, Utah, v. 1, n. 1, p. 43 -64, 2015. Disponível em: https://benjamins.com/catalog/jslp.1.1.02hay Acesso em: 30 out. 2023
HENRIQUES, A. S.; BARROS, T.; MADUREIRA, S. Proficiência oral em português brasileiro: cenário, contextos de avaliação e de instrução de questionamentos. Revista da Abralim, v. 19, n. 3, p. 775-798, 2020. Disponível em: https://revista.abralin.org/index.php/abralin/article/view/1755/1963 . Acesso em: 14 nov. 2023
MCNAMARA, T. F. ‘Interaction’ in second language performance assessment: whose performance? Applied Linguistics, v. 18, n. 4, p. 446-466, 1997. Disponível em: https://academic.oup.com/applij/article-abstract/18/4/446/206309?redirectedFrom=fulltext Acesso em 01 set. 2023.
NEVES, L. O. Confiabilidade e comportamento avaliativo na prova oral do exame Celpe-Bras: um estudo longitudinal. 2018. Tese. (Doutorado em Estudos de linguagens) - Centro Federal de Educação Tecnológica de Minas Gerais, Belo Horizonte, 2018.
NIEDERAUER, M. Competência interacional: critério para avaliação da produção oral em língua adicional. Trabalhos em Linguística Aplicada, Campinas, v. 53, n. 2, p. 403-424, jul./dez. 2014. Disponível em https://www.scielo.br/j/tla/a/TTg8q4tcQy6PKx7sJcyjTNn/ . Acesso em 30 out. 2023
RODRIGUES, M. S. A. O Exame Celpe-Bras: reflexões teórico-didáticas para o professor de português para falantes de outras línguas. 2006. Dissertação. (Mestrado em Linguística Aplicada). Universidade Estadual de Campinas, Campinas, 2006.
SAKAMORI, L. A atuação do entrevistador na interação face a face do exame Celpe-Bras. 2006. Dissertação (Mestrado em Linguística Aplicada) - Universidade Estadual de Campinas, Campinas. 2006.
SCARAMUCCI, M. V. O Exame Celpe-Bras e a proficiência do professor de português para falantes de outras línguas. Revista Digilenguas, Córdoba, v. 12, p. 48-67, 2012. Disponível em: https://www.lenguas.unc.edu.ar/uploads/DigilenguasN12.pdf#page=50 . Acesso em: 14 nov. 2023.
SCHLATTER, M. et al. Celpe-Bras e Celu: impactos da construção de parâmetros comuns de avaliação de proficiência em português e em espanhol. SCHLATTER, Margarete et al (org). O português do Brasil como língua transnacional. 1ª ed. Campinas: RG Editora, Campinas, 2009, p. 195-222.
SCHOFFEN, J. R. A avaliação de proficiência oral em língua estrangeira: descrição dos níveis de candidatos falantes de espanhol no exame Celpe-Bras. 2003. Dissertação. (Mestrado em Estudos de Linguagens) - Universidade Federal do Rio Grande do Sul, Rio Grande do Sul, 2003.
SHOHAMY, E. Language policy: hidden agendas and the new approches. Routledge: Nova York, 2006.
TRIVIÑOS, A. N. S. Introdução à pesquisa em ciências sociais. 1. ed. São Paulo: Atlas, 1987.
YOUNG, R. Sociolinguística de la adquisición de segundas lenguas. In: PRESTON, D. R.; YOUNG, R. Adquisición de segundas lenguas: variación y contexto social. Tradução por Francisco Moreno Fernández. Madrid: Arco Libros, 2000, p. 17-38
Downloads
Published
How to Cite
Issue
Section
License
Copyright (c) 2024 The ESPecialist
This work is licensed under a Creative Commons Attribution 4.0 International License.
The authors grant the journal all copyrights relating to the published works. The concepts issued in signed articles are the absolute and exclusive responsibility of their authors.
Esta obra está licenciada com uma Licença 