Desafíos de la evaluación de la escritura en lengua extranjera en el Nivel Superior
Percepciones de docentes sobre la aplicación de una escala analítica
DOI:
https://doi.org/10.48162.rev.5086Palabras clave:
Escritura en lengua extranjera, Escritura académica, Escala analítica de evaluación, EntrevistasResumen
La evaluación de la escritura en lengua extranjera es un campo de acción complejo, que suele generar ansiedad y aprehensión entre docentes debido a sus efectos e implicancias, tanto a nivel pedagógico como ético y político (Ruecker y Crusan, 2018) y que continúa siendo un área de permanente investigación, especialmente debido a la variedad y complejidad de contextos en los que se lleva a cabo. La evaluación de ensayos en lengua extranjera (inglés) por parte de docentes en las carreras de Profesorado, Traductorado y Licenciatura en Inglés en la Universidad Nacional de Córdoba (UNC) ha sido nuestro objeto de investigación en los últimos seis años. Se aplicaron distintos instrumentos de evaluación y una escala analítica de evaluación demostró ser la más adecuada para este contexto académico específico: la cátedra de Lengua Inglesa II. Con el fin de determinar la confiabilidad de dicha escala analítica, se llevó a cabo un proceso de validación de los descriptores que conforman cada una de las categorías de la escala. Se conformó un corpus de ejemplos textuales para ilustrar los descriptores y así lograr mayores niveles de confiabilidad, y se implementó un programa de entrenamiento de evaluadores en línea previo a la aplicación de la escala. El objetivo de este trabajo, que forma parte de un proyecto de investigación mayor cuyo objetivo es la validación del instrumento diseñado de evaluación de la escritura en lengua extranjera, es presentar las percepciones de los docentes evaluadores obtenidas a través de entrevistas.
Citas
Alderson, J.; Brunfaut, T. y Harding, L. (2017). Bridging assessment and learning: a view from second and foreign language assessment. Assessment in Education: Principles, Policy & Practice, 24(3), 379-387. https://doi.org/10.1080/0969594X.2017.1331201
Barkahoui, K. y Hadidi, A. (2021). Assessing Change in English Second Language Writing Performance. Routledge.
Brookhart, S. M. (2018). Appropriate criteria: Key to effective rubrics. Frontiers in Education, 3 (22). https://doi.org/10.3389/feduc.2018.00022
Brookhart, S. M. y Chen, F. (2015). The quality and effectiveness of descriptive rubrics. Educational Review, 67(3), 343-368. https://doi.org/10.1080/00131911.2014.929565
Caperucci, D. (2018). Assessment and certification of foreign language learning through rubrics: A methodological perspective. En A. Lopes y R. Ruiz Cecilia (Eds.), New Trends in Foreign Language Teaching: Methods, Evaluation and Innovation (294-307). Cambridge Scholars Publishing.
Chapelle, C. A. (2020). Argument-based Validation in Testing and Assessment. SAGE Publications.
Coombe, C. (2018). An A to Z of Second Language Assessment: How Language Teachers Understand Assessment Concepts. British Council. www.britishcouncil.org/exam/aptis/research/assessment-literacy
Crusan, D. (2010). Assess thyself lest others assess thee. En T. Silva y P. Matsuda (Eds.), Practicing theory in second language writing (pp. 245- 262). Parlor Press.
Cushing Weigle, S. (2016). Second language writing assessment. En R. Manchón y P. K. Matsuda, Handbook of Second and Foreign Language Writing (pp. 473-496). De Gruyter.
Dawson, P. (2017). Assessment rubrics: Towards clearer and more replicable design, research, and practice. Assessment and Evaluation in Higher Education, 42 (3), 347-360.
Erguvan, I. y Aksu Dunya, B. (2020). Analyzing rater severity in a freshman composition course using many-facet Rasch measurement. Language Testing in Asia, 10(1). https://doi.org/10.1186/s40468-020-0098-3
Faieza, C. (2019). Application of rubrics in the classroom: A vital tool for improvement in assessment, feedback and learning. International Education Studies,12(1),61-68.
Ferris, D. y Hedgcock, J. (2023). Teaching L2 Composition. Purpose, process and practice (Fourth edition). Routledge.
Gallardo, K. (2020). Competency-based assessment and the use of performance-based evaluation rubrics in higher education: challenges towards the next decade. Problems of Education in the 21st Century, 78(1), 61-79.
Goodman, S. y Swann, J. (2003). Planning the assessment of student writing. En C. Coffin, M.J. Curry, S. Goodman, A. Hewings, T.M. Lillis y J.
Swann. (Eds), Teaching academic writing. A toolkit for higher education (pp. 73-100). Routledge.
Hatch, J. A. (2002). Doing qualitative research in education settings. State University of New York Press.
Huang, J. y Han, T. (2013). Holistic or analytic – A dilemma for professors to score EFL essays? Leadership and Policy Quarterly, 2(1), 1-18.
Huff, J. (2021). College Writing Instructors Using Rubrics to Drive Instruction. Academia Letters, Article 2639. https://doi.org/10.20935/AL2639
Hyland, K. (2019). Second language writing. Cambridge University Press.
Jonsson, A. (2014). Rubrics as a way of providing transparency in assessment. Assessment and Evaluation in Higher Education, 39(7), 840–852. https://doi.org/10.1080/02602938.2013.875117
Moss, P. (2003). Reconceptualizing validity for classroom assessment. Educational Measurement Issues and Practice, 22 (4), 13-25. http://journalofwritingassessment.org/article.php?article=54
O’Sullivan, B. y Weir, C. (2011). Language testing and validation. En B. O’Sullivan (Ed.), Language Testing: Theory & Practice (pp. 13–32). Palgrave.
Panadero, E. y Jonsson, A. (2013). The use of scoring rubrics for formative assessment purposes revisited: A review. Educational Research Review, 9, 129-144. https://doi.org/10.1016/j.edurev.2013.01.002
Parkes, J. (2007). Reliability as argument. Educational Measurement: Issues and Practice, 26 (4), 2-10. http://www.jwalkonline.org/docs/Grad%20Classes/Spring%2008/modmeas/general%20articles/Parkes%20(2007).pdf
Purpura, J. (2016). Second and foreign language assessment. The Modern Language Journal, 100(1), 190-208. https://doi.org/10.1111/modl.12308
Romano, M. E. y Martínez, J. I. (2017). Evaluación de la escritura en lengua extranjera (inglés): Análisis de criterios docentes. En F. Ávalos, H. Gargiulo, J. Rodriguez y E. Villanueva de Debat. (Eds.), Currículum, perspectivas didácticas y evaluación. Didáctica del Español Lengua Segunda y Extranjera. Lengua de señas (pp. 78-91). Universidad Nacional de Córdoba.https://repositoriosdigitales.mincyt.gob.ar/vufind/Record/RDUUNC_47a9b641ffd7a0880d006acdfe60f4a3
Ruecker, T. y Crusan, D. (2018). The Politics of English Second Language Assessment in Global Contexts. Routledge.
Sampson Anderson, S. (2017). Differences across levels in the language of agency and ability in rating scales for large-scale second language writing assessments. Studia Anglica Posnaniensia, 52 (2), 147-172. https://repozytorium.amu.edu.pl/bitstream/10593/21251/1/Sampson%20Anderson.pdf
Shaw, S.D. y Weir, C.J. (2007). Examining writing. Research and practice in assessing second language writing. Cambridge University Press.
Velasco-Martínez, L. C. y Hurtado, J. C. T. (2018). The use of rubrics in higher education and competences evaluation. Profesorado, 22(3), 183–208. https://doi.org/10.30827/profesorado.v22i3.7998
Vercellotti, M. (2021). Beyond the rubric: Classroom assessment tools and assessment practice. TESL-EJ, 25 (3). https://www.tesl-ej.org/wordpress/issues/volume25/ej99/ej99a9/
Vercellotti, M. y McCormick, D. (2021). Constructing analytic rubrics for assessing open ended tasks in the language classroom. TESL-EJ, 24(4). https://www.teslej.org/wordpress/issues/volume24/ej96/ej96a2/
Weir, C. J. (2005). Language testing and validation. An evidence-based approach. Palgrave Macmillan.
Wind, S., y Peterson, M. (2017). A systematic review of methods for evaluating rating quality in language assessment. Language Testing, 35(2), 161-192.
Descargas
Publicado
Cómo citar
Número
Sección
Licencia
Derechos de autor 2023 María Elisa Romano, Julia Inés Martínez, Natalia Dalla Costa
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial-SinDerivadas 4.0.
- Los autores/as conservarán sus derechos de autor y garantizarán a la revista el derecho de primera publicación de su obra, el cuál estará simultáneamente sujeto a la Licencia de reconocimiento de Creative Commons que permite a terceros compartir la obra siempre que se indique su autor y su primera publicación esta revista.
- Los autores/as podrán adoptar otros acuerdos de licencia no exclusiva de distribución de la versión de la obra publicada (p. ej.: depositarla en un archivo telemático institucional o publicarla en un volumen monográfico) siempre que se indique la publicación inicial en esta revista.
- Se permite y recomienda a los autores/as difundir su obra a través de Internet (p. ej.: en archivos telemáticos institucionales o en su página web) antes y durante el proceso de envío, lo cual puede producir intercambios interesantes y aumentar las citas de la obra publicada. (Véase El efecto del acceso abierto).
