¿Cómo afectan la formación profesional y la experiencia docente la evaluación de la escritura?
DOI:
https://doi.org/10.1590/S1678-4634202551290279esPalabras clave:
Criterios de evaluación, Escritura, Evaluación, Experiencia docente, Experiencia profesionalResumen
El presente estudio analiza cómo las diferencias personales de profesionales de la educación influyen en la evaluación que hacen de un texto escrito. Para llevar a cabo el estudio, 146 docentes, los cuales fueron diferenciados según su formación académica de pregrado (Pedagogía en Educación General Básica y afines; y Pedagogía en Lengua Castellana y Comunicación y afines) y su experiencia profesional (estudiantes de pedagogía en etapa final de formación, profesores principiantes y profesores experimentados), evaluaron un trabajo escrito de un estudiante del último curso de primaria. Para evaluar el trabajo escrito, los docentes utilizaron una rúbrica analítica y una rúbrica holística que mide los aspectos textuales y los normativos de la lengua española. En los resultados se muestra que los profesores y profesoras, según su formación académica y experiencia profesional docente, se diferencian al evaluar aspectos como la ortografía literal, la estructura textual y la ortografía acentual. Al emitir un juicio global sobre la tarea de escritura, no hubo efectos relacionados ni con la formación académica ni con la experiencia profesional docente; sin embargo, sí se identificaron efectos de interacción entre ambos factores. Se analizan los resultados obtenidos y las implicancias del estudio.
Descargas
Referencias
ABDEL LATIF, Muhammad M. M.; ALSUHAIBANI, Zainab; ALSAHIL, Asma. Matches and mismatches between Saudi university students' English writing feedback preferences and teachers' practices. Assessing Writing, London, v. 61, p. 100863, 2024. https://doi.org/10.1016/j.asw.2024.100863
» https://doi.org/10.1016/j.asw.2024.100863
ANDRADE, Heidi L.; DU, Ying; WANG, Xiaolei. Putting rubrics to the test: the effect of a model, criteria generation, and rubric-referenced self-assessment on elementary school students' writing. Educational Measurement: Issues and Practice, Nueva Jersey, v. 27, n. 2, p. 3-13, 2008. https://doi.org/10.1111/J.1745-3992.2008.00118.X
» https://doi.org/10.1111/J.1745-3992.2008.00118.X
ASTUDILLO, César; CABEZAS, Paula; SABAJ, Omar; VARAS, Germán. El informe de arbitraje de rechazo: su microvariación según los tipos de evaluador. Literatura y Lingüística, Santiago de Chile, v. 39, p. 301-323, 2019. https://doi.org/http://dx.doi.org/10.29344/0717621x.39.2015
» https://doi.org/http://dx.doi.org/10.29344/0717621x.39.2015
BAÑALES, Gerardo; AHUMADA, Silza; GRAHAM, Steve; PUENTE, Aníbal; GUAJARDO, Marcela; MUÑOZ, Ignacio. Teaching writing in grades 4-6 in urban schools in Chile: a national survey. Reading and Writing, Dordrecht, v. 33, n..10, p. 2661-2696, 2020. https://doi.org/10.1007/s11145-020-10055-z
» https://doi.org/10.1007/s11145-020-10055-z
BARDACH, Lisa; KLASSEN, Robert M.; PERRY, Nancy E. Teachers' psychological characteristics: do they matter for teacher effectiveness, teachers' well-being, retention, and interpersonal relations? An integrative review. Educational Psychology Review, New York, v. 34, n. 1, p. 259-300, 2022. https://doi.org/10.1007/s10648-021-09614-9
» https://doi.org/10.1007/s10648-021-09614-9
BECK, Sarah W.; LLOSA, Lorena; BLACK, Kristin; ANDERSON, Alyssa T. G. From assessing to teaching writing: what teachers prioritize. Assessing Writing, London, v. 37, p. 68-77, 2018. https://doi.org/10.1016/J.ASW.2018.03.003
» https://doi.org/10.1016/J.ASW.2018.03.003
BELL, Beverley; GILBERT, John. Teacher development as professional, personal, and social development. Teaching and Teacher Education, Oxford, v. 10, n. 5, p. 483-497, 1994. https://doi.org/10.1016/0742-051X (94)90002-7
» https://doi.org/10.1016/0742-051X (94)90002-7
BERGE, Kjell Lars; EVENSEN, Lars Sigfred; THYGESEN, Ragnar. The wheel of writing: a model of the writing domain for the teaching and assessing of writing as a key competency. Curriculum Journal, New Jersey, v. 27, n. 2, p. 172-189, 2016. https://doi.org/10.1080/09585176.2015.1129980
» https://doi.org/10.1080/09585176.2015.1129980
BERLINER, David C. Describing the behavior and documenting the accomplishments of expert teachers. Bulletin of Science, Technology & Society, Jacksonville, v. 24, n. 3, p. 200-212, 2004. https://doi.org/10.1177/0270467604265535
» https://doi.org/10.1177/0270467604265535
CHILE. Ministerio de Educación. Bases curriculares 7° básico a 2° medio. Santiago de Chile: Mineduc, 2015. Disponível em: https://www.curriculumnacional.cl/portal/Curso/Educacion-General/7-basico/34949:Bases-Curriculares-7-basico-a-2-medio Acceso en: 13 febr. 2024.
CUSHING, Sara. Investigating rater/prompt interactions in writing assessment: Quantitative and qualitative approaches. Assessing Writing, London, v. 6, n. 2, p. 145-178, 1999. https://doi.org/10.1016/S1075-2935 (00)00010-6
» https://doi.org/10.1016/S1075-2935 (00)00010-6
ESTAJI, Masoomeh. Unveiling the impact of language assessment teacher education on EFL teachers' assessment agency and professional development trajectory: perceptions, opportunities, and challenges. Language Testing in Asia, London, v. 14, n. 1, p. 20, 2024. https://doi.org/10.1186/s40468-024-00292-2
» https://doi.org/10.1186/s40468-024-00292-2
FLORES-FERRÉS, Magdalena; VAN WEIJEN, Daphne; RIJLAARSDAM, Gert. Teachers' writing practices and contextual features in grades 7-12 of Chilean public schools. Journal of Writing Research, Amberes, v. 12, n. 2, p. 365-417, 2020. https:// doi.org/10.17239/jowr-2020.12.02.03
» doi.org/10.17239/jowr-2020.12.02.03
FLORES-FERRÉS, Magdalena; VAN WEIJEN, Daphne; RIJLAARSDAM, Gert. Understanding writing curriculum innovation in Grades 7-12 in Chile: Linking teachers' beliefs and practices. Journal of Writing Research, Amberes, v. 13, n. 3, p. 367-414, 2022. https://doi.org/10.17239/JOWR-2022.13.03.02
» https://doi.org/10.17239/JOWR-2022.13.03.02
FLORES-FERRÉS, Magdalena; VAN WEIJEN, Daphne; VAN OCKENBURG, Liselore; TEN PEZE, Anouk; ALKEMA, Edith; HOLDINGA, Lieke; RIJLAARSDAM, Gert. Writing to understand and being understood: basic design principles for writing instruction. In: GALVÃO SPINILLO, Alina; SOTOMAYOR, Carmen (ed.). Development of writing skills in children in diverse cultural contexts. Cham: Springer International, 2023. p. 393-427. https://doi.org/10.1007/978-3-031-29286-6_18
» https://doi.org/10.1007/978-3-031-29286-6_18
FÖRSTER, Carla. Alfabetización evaluativa de los docentes. In: FÖRSTER, Carla (org.). El poder de la evaluación en el aula: mejores decisiones para promover aprendizajes. v. 1. 2. ed. Santiago de Chile: UC, 2021. p. 15-42.
FRANCIOSI, Ana Paula; VIEIRA, Suelen; BOTH, Jorge. Satisfacción laboral y síndrome de Burnout en docentes de educación física de educación básica. Revista Ciencias de la Actividad Física, Talca, v. 24, n. 1, p. 1-18, 2023. https://doi.org/10.29035/rcaf.24.1.2
» https://doi.org/10.29035/rcaf.24.1.2
GANSLE, Kristin A.; NOELL, George H.; VANDERHEYDEN, Amanda M.; SLIDER, Natalie J.; HOFFPAUIR, Leila D.; WHITMARSH, Ernest L.; NAQUIN, Gale M. An examination of the criterion validity and sensitivity to brief intervention of alternate curriculum-based measures of writing skill. Psychology in the Schools, New Jersey, v. 41, n. 3, p. 291-300, 2004. https://doi.org/10.1002/PITS.10166
» https://doi.org/10.1002/PITS.10166
GÓMEZ, Gabriela; SOTOMAYOR, Carmen; JÉLDREZ, Elvira; BEDWELL, Percy; DOMÍNGUEZ, Ana María. La producción escrita de estudiantes y escuela en base a resultados SIMCE, factores contextuales y modelos de buenas prácticas docentes. Santiago de Chile: Fondo de Investigación y Desarrollo en Educación, 2016. Disponível em: https://biblioteca.digital.gob.cl/handle/123456789/357?show=full Acceso en: 13 febr. 2024.
» https://biblioteca.digital.gob.cl/handle/123456789/357?show=full
GONZÁLEZ-LAGUNA, María; LÓPEZ, Paula; VALENZUELA, Ángel; ALVES, Rui; FIDALGO, Raquel. ICT in the teaching of writing competence: mediational teaching factors. Revista Comunicar, en prensa.
GORE, Jennifer; ROSSER, Brooke; JAREMUS, Felicia; MILLER, Andrew; HARRIS, Jess. Fresh evidence on the relationship between years of experience and teaching quality. The Australian Educational Researcher, Dordrecht, v. 51, n. 2, p. 547-570, 2024. https://doi.org/10.1007/s13384-023-00612-0
» https://doi.org/10.1007/s13384-023-00612-0
GRAHAM, Steve; GILLESPIE, Amy; McKeown, Debra. Writing: importance, development, and instruction. Reading and Writing, Dordrecht, v. 26, n. 1, p. 1-15, 2013. https://doi.org/10.1007/s11145-012-9395-2
» https://doi.org/10.1007/s11145-012-9395-2
HAMP-LYONS, Liz. Best practice in writing assessment. In: TAYLOR, Linda; WEIR, Cyril (ed.). Multilingualism and assessment: achieving transparency, assuring quality, sustaining diversity [...]. Cambridge: Cambrige University Press, 2008. p. 321-335.
HUBERMAN, A. M. The lives of teachers. 1. ed. London: Casell, 1993.
HUMPHRY, Stephen; HELDSINGER, Sandy. Raters' perceptions of assessment criteria relevance. Assessing Writing, London, v. 41, p. 1-13, 2019. https://doi.org/10.1016/j.asw.2019.04.002
» https://doi.org/10.1016/j.asw.2019.04.002
KIM, Young Suk Grace; SCHATSCHNEIDER, Christopher; WANZEK, Jeanne; GATLIN, Brandy; AL OTAIBA, Stephanie. Writing evaluation: rater and task effects on the reliability of writing scores for children in Grades 3 and 4. Reading and Writing, Dordrecht, v. 30, n. 6, p. 1287-1310, 2017. https://doi.org/10.1007/s11145-017-9724-6
» https://doi.org/10.1007/s11145-017-9724-6
KIRAZ, Ercan; YILDIRIM, Soner. Enthusiasm vs. experience in mentoring: A comparison of Turkish novice and experienced teachers in fulfilling supervisory roles. Asia Pacific Education Review, Heidelberg, v. 8, n. 2, p. 250-260, 2007. https://doi.org/10.1007/BF03029260
» https://doi.org/10.1007/BF03029260
LIU, Li. Scoring judgment of pre-service EFL teachers: does writing proficiency play a role? Asia-Pacific Education Researcher, Heidelberg, v. 31, n. 3, p. 333-343, 2021. https://doi.org/10.1007/s40299-021-00575-9
» https://doi.org/10.1007/s40299-021-00575-9
LIZASOAIN, Andrea; TOLEDO, Gloria. Evaluación de la producción escrita de estudiantes secundarios haitianos por parte de profesores de Lengua y Literatura en Chile. Estudios Filológicos, Valdivia, n. 66, p. 185-205, 2020. https://doi.org/10.4067/S0071-17132020000200185
» https://doi.org/10.4067/S0071-17132020000200185
MAREFAT, Fahimeh; HEYDARI, Mojtaba. Native and Iranian teachers' perceptions and evaluation of Iranian students' English essays. Assessing Writing, Londron, v. 27, p. 24-36, 2016. https://doi.org/10.1016/J.ASW.2015.10.001
» https://doi.org/10.1016/J.ASW.2015.10.001
MENDELSOHN, David; CUMMING, Alister. Professor's ratings of language use and rhetorical organizations in ESL compositions. TESL Canada Journal, Edmonton, v. 5, n. 1, p. 09-26, 1987. https://doi.org/10.18806/tesl.v5i1.512
» https://doi.org/10.18806/tesl.v5i1.512
MIRANDA, Christian; RIVERA, Pablo; SALINAS, Silvia; MUÑOZ, Erwin. ¿Qué hace a la formación permanente de profesores eficaz?: factores que inciden en su impacto. Estudios Pedagógicos, Valdivia, v. 36, n. 2, p. 135-151, 2010. https://doi.org/10.4067/S0718-07052010000200008
» https://doi.org/10.4067/S0718-07052010000200008
PRIETO, Marcia. Creencias de los profesores sobre evaluación y efectos incidentales. Revista de Pedagogía, Caracas, vol. 29, no 84, p. 123-144, 2008. Disponível em: https://www.redalyc.org/pdf/659/65908405.pdf Acceso en: 04 mar. 2024.
» https://www.redalyc.org/pdf/659/65908405.pdf
RAO, Zhenhui; LIU, Fulan. An investigation into native and non-native teachers' assessment of Chinese students' English writing. Southern African Linguistics and Applied Language Studies, Oxford, v. 38, n. 2, p. 152-166, 2020. https://doi.org/10.2989/16073614.2020.1805776
» https://doi.org/10.2989/16073614.2020.1805776
RAVANAL, Eduardo; LÓPEZ-CORTÉS, Francisco; AMÓRTEGUI, Elías; JOGLAR, Carol. Preocupaciones docentes y las etapas de desarrollo de profesores chilenos de Biología. Revista de Estudios y Experiencias en Educación, Concepción, v. 20, n. 42, p. 213-232, 2021. https://doi.org/10.21703/rexe.20212042ravanal13
» https://doi.org/10.21703/rexe.20212042ravanal13
RUIZ, Héctor. ¿Cómo aprendemos? Una aproximación científica al aprendizaje y la enseñanza. 3. ed. Barcelona: Graó, 2021.
RUSSELL, Tom. How experience changed my values as a teacher educator. In: RUSSEL, Tom; LOUGHRAN, John (ed.). Enacting a pedagogy of teacher education. New York: Routledge, 2007. p. 192-201. https://doi.org/10.4324/9780203962442-17
» https://doi.org/10.4324/9780203962442-17
RYAN, Mary. Reflexive writers: te-thinking writing development and assessment in schools. Assessing Writing, London, v. 22, p. 60-74, 2014. https://doi.org/10.1016/j.asw.2014.08.002
» https://doi.org/10.1016/j.asw.2014.08.002
SHOHAMY, Elana; GORDON, Claire M.; KRAEMER, Roberta. The effect of raters' background and training on the reliability of direct writing tests. The Modern Language Journal, New Jersey, v. 76, n. 1, p. 27-33, 1992. https://doi.org/10.1111/J.1540-4781.1992.TB02574.X
» https://doi.org/10.1111/J.1540-4781.1992.TB02574.X
SOTOMAYOR, Carmen; COLOMA, Carmen; PARODI, Giovanni; CAVADA, Paula; GYSLING, Jacqueline. Percepción de los estudiantes de pedagogía sobre su formación inicial. Magis: Revista Internacional de Investigación en Educación, Bogotá, v. 5, n. 11, p. 375-392, 2013. Disponível em: http://www.redalyc.org/articulo.oa?id=281028437006 Acceso en: 20 dici. 2023.
» http://www.redalyc.org/articulo.oa?id=281028437006
SOTOMAYOR, Carmen; GÓMEZ, Gabriela; JÉLDREZ, Elvira; BEDWELL, Percy; DOMÍNGUEZ, Ana María. Calidad de la Escritura en la Educación Básica, Santiago de Chile, n. 13, 2014. Disponível em: http://www.ciae.uchile.cl/download.php?file=doctrabajo/13-072014.pdf Acceso en: 20 dici.2023.
» http://www.ciae.uchile.cl/download.php?file=doctrabajo/13-072014.pdf
SOTOMAYOR, Carmen; GÓMEZ, Gabriela; JÉLDREZ, Elvira; BEDWELL, Percy; DOMÍNGUEZ, Ana María; ÁVILA, Natalia. Evaluación analítica de la escritura de estudiantes de 4° año básico en Chile. Onomázein, Santiago de Chile, v. 34, n. 2, p. 381-425, 2016. https://doi.org/10.7764/onomazein.34.21
» https://doi.org/10.7764/onomazein.34.21
SOTOMAYOR, Carmen; PARODI, Giovanni; COLOMA, Carmen; IBÁÑEZ, Romualdo; CAVADA, Paula. La formación inicial de docentes de Educación General Básica en Chile. ¿Qué se espera que aprendan los futuros profesores en el área de Lenguaje y Comunicación? Pensamiento Educativo: Revista de Investigación Educacional Latinoamericana, Santiago de Chile, v. 48, n. 1, p. 28-42, 2011. https://doi.org/10.7764/pel.48.1.2011.3
» https://doi.org/10.7764/pel.48.1.2011.3
STEISS, Jacob; KRISHNAN, Jenell; KIM, Young Suk Grace; OLSON, Carol Booth. Dimensions of text-based analytical writing of secondary students. Assessing Writing, London, v. 51, p. 100600, 2022. https://doi.org/10.1016/J.ASW.2021.100600
» https://doi.org/10.1016/J.ASW.2021.100600
STRUTHERS, Lynda; LAPADAT, Judith C.; MACMILLAN, Peter D. Assessing cohesion in children's writing: Development of a checklist. Assessing Writing, London, v. 18, n. 3, p. 187-201, 2013. https://doi.org/10.1016/J.ASW.2013.05.001
» https://doi.org/10.1016/J.ASW.2013.05.001
TORRIJOS-MUELAS, Marta; GONZÁLEZ-VÍLLORA, Sixto; BODOQUE-OSMA, Ana Rosa. The persistence of neuromyths in the educational settings: a systematic review. Frontiers in Psychology, Lausana, v. 11, 2021. https://doi.org/10.3389/fpsyg.2020.591923
» https://doi.org/10.3389/fpsyg.2020.591923
VALENZUELA, Ángel. Desempeño escrito de los estudiantes de secundaria en Chile: una evaluación directa e indirecta de la escritura. Logos: Revista de Lingüística, Filosofía y Literatura, La Serena, v. 32, n. 1, p. 91-105, 2022. https://doi.org/10.15443/RL3206
» https://doi.org/10.15443/RL3206
VARGAS, Sylvia; NAREA, Marigen; TORRES-IRRIBARRA, David. Creencias epistemológicas en profesores y su relación con el desarrollo profesional desde la evaluación docente. Psykhe, Santiago de Chille, v. 30, n. 2, 2021. https://doi.org/10.7764/psykhe.2019.21809
» https://doi.org/10.7764/psykhe.2019.21809
VERDUGO, Alejandro. Factores que facilitan y dificultan la integración de estándares pedagógicos de egreso en el plan formativo de carreras de pedagogía. Revista de Estudios y Experiencias en Educación, Concepción, v. 20, n. 43, p. 95-112, 2021. https://doi.org/10.21703/rexe.20212043verdugo5
» https://doi.org/10.21703/rexe.20212043verdugo5
WIND, Stefanie A.; ENGELHARD, George. How invariant and accurate are domain ratings in writing assessment? Assessing Writing, London, v. 18, n. 4, p. 278-299, 2013. https://doi.org/10.1016/J.ASW.2013.09.002
» https://doi.org/10.1016/J.ASW.2013.09.002
WOLFF, Charlotte E.; JARODZKA, Halszka; BOSHUIZEN, Henny P. A. Classroom management scripts: a theoretical model contrasting expert and novice teachers' knowledge and awareness of classroom events. Educational Psychology Review, New York, v. 33, n. 1, p. 131-148, 2021. https://doi.org/10.1007/S10648-020-09542-0/FIGURES/3
» https://doi.org/10.1007/S10648-020-09542-0/FIGURES/3
WOLFF, Charlotte E.; JARODZKA, Halszka; VAN DEN BOGERT, Niek; BOSHUIZEN, Henny P.A. Teacher vision: expert and novice teachers' perception of problematic classroom management scenes. Instructional Science, Dordrecht, v. 44, n. 3, p. 243-265, 2016. https://doi.org/10.1007/S11251-016-9367-Z/TABLES/6
» https://doi.org/10.1007/S11251-016-9367-Z/TABLES/6
ZHENG, Yao; YU, Shulin. What has been assessed in writing and how? Empirical evidence from Assessing Writing (2000-2018). Assessing Writing, London, v. 42, p. 100421, 2019. https://doi.org/10.1016/j.asw.2019.100421
Publicado
Número
Sección
Licencia
Derechos de autor 2025 Educação e Pesquisa
Esta obra está bajo una licencia internacional Creative Commons Atribución 4.0.
Los conceptos emitidos en los artículos son de exclusiva responsabilidad de sus autores y no reflejan necesariamente la opinión de la redacción.
Está permitida la reproducción total o parcial de los trabajos, siempre y cuando se indique explícitamente la fuente.
