Cenário avaliativo inovador no Ensino Superior: análise a partir de uma e-rubrica holística bifocal

Abstract

e5223072This text focuses on the adoption of innovative assessment practices in Higher Education. The study was carried out in two curricular components, Spanish and English Literacies, of an Additional Languages undergraduate program, offered in a public university in Brazil. It aims to contrast the use of a holistic e-rubric, adopted to assess both the process and the outcome of the students' performances during an academic semester in which an interdisciplinary project was promoted, based on the theme of Happiness. Throughout the semester, a set of mentoring sessions aimed at qualifying the actors' assessment literacy. At the end of the academic semester, it was proposed that both professors and students used the same holistic rubric created for both subjects. The data showed that there were no statistical differences between the scores assigned by the professors and the self-rated scores by the students. Also, the final performances were higher with the adoption of the implemented assessment proposal, compared to the semesters in which there was no assessment through rubrics nor did the integrated work between both disciplines. The experience brought reliability to the professors about the students' sincere and adequate self-perception concerning their knowledge, and it proved to be favorable for the expansion, diffusion, and adoption of similar proposals in other contexts.ResumoEste texto está centrado na adoção de práticas avaliativas inovadoras no Ensino Superior. O estudo foi realizado em dois componentes curriculares, Letramentos em Espanhol e Letramento em Inglês, de um curso de Letras - Línguas Adicionais ofertado em uma universidade pública brasileira, tendo como objetivo contrastar a utilização de uma e-rubrica holística adotada para a avaliação tanto do processo quanto dos resultados de desempenhos discentes durante um semestre letivo em que se promoveu um projeto integrado a partir da temática da Felicidade. Ao longo do semestre, foram realizadas um conjunto de mentorias voltadas a qualificar o letramento em avaliação dos atores envolvidos. Ao final do semestre letivo, foi proposto que tanto as docentes quanto os discentes lançassem mão de uma mesma rubrica holística criada para ambas as disciplinas. Os dados evidenciaram que não ocorreram diferenças estatísticas entre as pontuações atribuídas pelas docentes e as pontuações autoatribuídas pelos discentes. Além disso, os desempenhos finais foram mais altos com a adoção da proposta avaliativa implementada, em comparação aos semestres em que não havia a avaliação através de rubricas e tampouco o trabalho integrado entre ambas as disciplinas. A experiência trouxe confiabilidade para as docentes sobre a autopercepção sincera e adequada dos discentes em relação ao seu conhecimento e se mostrou favorável para ampliação, difusão e adoção de propostas similares em outros contextos.ResumenEste texto se centra en la adopción de prácticas evaluativas innovadoras en la educación superior. El estudio se llevó a cabo en dos asignaturas, Literacidad en Español y Literacidad en Inglés, de un curso de Letras - Lenguas Adicionales que se ofrece en una universidad pública brasileña, con el objetivo de contrastar el uso de una e-rúbrica holística adoptada tanto para la evaluación de los procesos como de los resultados de las actuaciones de los estudiantes durante un semestre académico en el que se impulsó un proyecto integrado, con base en la temática de la Felicidad. A lo largo del semestre, se llevó a cabo un conjunto de sesiones de mentorías orientadas a calificar la literacidad en evaluación de los actores involucrados. Al final del semestre académico, se propuso que tanto las profesoras como los estudiantes utilizaran la misma rúbrica holística creada para ambas asignaturas. Los datos demostraron que no hubo diferencia estadística entre los puntajes asignados por las profesoras y los puntajes de las autocalificaciones asignadas por los estudiantes. Además, los desempeños finales fueron superiores con la adopción de la propuesta de evaluación implementada, en comparación a los semestres en que no hubo evaluación a través de rúbricas ni tampoco el trabajo integrado entre ambas asignaturas. La experiencia brindó confiabilidad a las docentes sobre la autopercepción sincera y adecuada de los estudiantes con respecto a sus conocimientos y resultó favorable para la expansión, difusión y adopción de propuestas similares en otros contextos.Palavras-chave: Avaliação do Desempenho Discente, Ensino Superior, Educação para a Inovação, Curso de Licenciatura.Keywords: Student Performance Assessment, Higher Education, Education for Innovation, Undergraduate Teaching Course.Palabras clave: Evaluación de la Actuación Estudiantil, Enseñanza Superior, Educación para la Innovación, Carrera de Formación Docente.ReferencesAUBUSSON, Peter; SCHUCK, Sandy. Researching and Learning from our Practices. In: AUBUSSON, Peter; SCHUCK, Sandy. (Orgs.). Teacher Learning and Development: the mirror maze. Sydney: Australia, Springer, 2008, p.1-12.BENDER, William. Aprendizagem baseada em Projetos: educação diferenciada para o século XXI. Porto Alegre: Penso, 2014.BLASS, Leandro; IRALA, Valesca. O uso da aprendizagem baseada em problemas (PBL) como metodologia de ensino em aulas de Cálculo Numérico. Revista de Educação Matemática, v.17, p.e020035, 7 jul. 2020. DOI: https://doi.org/10.37001/remat25269062v17id360.BOHN, Hilário. Maneiras inovadoras de ensinar e aprender: a necessidade de (re)construção de conceitos. In: LEFFA, V. (Org.). O professor de línguas estrangeiras: construindo a profissão. Pelotas: Educat, 2001, p.115-124.BROOKHART, Susan. How to create and use rubrics for formative assessment and grading. Alexandria, Virginia (USA): ASCD, 2013.BUTLER, Helen et al. The critical friend: facilitating change and wellbeing in school communities. Australia: Acer Press, 2011.CARBONELL, Jaume. A aventura de inovar: a mudança na escola. Porto Alegre: Artmed, 2002.CORNEJO, José. El self-study de la práctica de los formadores de futuros profesores: bases teóricas, características y modalidades metodológicas. In: RUSSELL, Tom; FUENTEALBA, Rodrigo HIRMAS, Carolina (Orgs.). Formadores de formadores, descubriendo la propia voz a través del self-study. Santiago do Chile: OEI, 2016, p.25-64.DORNELLES, Clara. A gente não quer ser tradicional, mas...como é que faz, daí? A inovação curricular e o debate popularizado sobre língua portuguesa e ensino. 2008. 169p. Tese (Doutorado em Linguística Aplicada), Instituto de Estudos da Linguagem, Universidade Estadual de Campinas, Campinas, 2008.FIELD, Andy. Descobrindo a estatística usando o SPSS. Porto Alegre: Artmed, 2009.GIL FLORES, Javier; DE BESA GUTIÉRREZ, Manuel; GARZÓN UMERENKOVA, Angélica. ¿Por qué procrastina el alumnado universitario?Análisis de motivos y caracterización del alumnado con diferentes tipos de motivaciones. Revista de Investigación Educativa, v. 38, n. 1, p. 183-200, 2020.Disponível em: http://dx.doi.org/10.6018/rie.344781. Acesso em: 06 mai. 2020.HORN, Michael; STAKER, Heather. Blended: usando a inovação disruptiva para aprimorar a educação. Porto Alegre: Penso, 2015.IRALA, Valesca; DUARTE, Gabriela. E-rubrica holística para a área da linguagem com enquadre responsivo bifocal na adoção de Project-based learning. 2019. Disponível em: https://www.researchgate.net/publication/344565497_E-Rubrica_holistica_para_a_area_da_linguagem_com_enquadre_responsivo_bifocal_na_adocao_de_Project-based_learning. Acesso em: 29 jul. 2021. DOI: 10.13140/RG.2.2.13711.20641.IRALA, Valesca. Inovação na formação de professores de espanhol: a experiência em um curso de Letras/Línguas Adicionais. In: ERES FENÁNDEZ, Gretel; BAPTISTA, Lívia; SILVA, Antonio Messias. (Orgs.). Enseñanza y aprendizaje del español en Brasil: aspectos lingüísticos, discursivos e interculturales. Brasília: Consejería de Educación de la Embajada de España en Brasil/Ministerio de Educación, Cultura y Deporte de España, 2016, p. 171-184.JOHNSON, Cara; BERGMANN, Jon. Flipped 3.0. Flipped Mastery Learning. An Insanely Simple Guide. Irvine: FL Global Publishing, 2018.LEVIN, Jack; FOX, James; FORDE, David. Estatística para ciências humanas. 11 ed. São Paulo: Pearson, 2012.LIMA FILHO, Raimundo Nonato; BRUNI, Adriano Leal. Metacognição estimula características empreendedoras? Uma análise em profissionais de Administração. RACE - Revista de Administração, Contabilidade e Economia, v. 14, n. 2, p. 427-450, 12 ago. 2015.LÓPEZ-PASTOR, Víctor Manuel. Evaluación formativa y compartida: evaluar para aprender y la implicación del alumnado en los procesos de evaluación y aprendizaje. In: LÓPEZ-PASTOR Victor; PÉREZ-PUEYO, Ángel. (Orgs.). Evaluación formativa y compartida en Educación: experiencias de éxito en todas las etapas educativas. León: Universidad de León, 2017, p. 34-69.MARCHETI, Ana Paula do Carmo. Rubricas: um importante instrumento para correção de desempenho discente. Revista Eletrônica Científica Ensino Interdisciplinar. Mossoró, v. 6, n. 16, p. 58 – 76, 2020.MJELDE, Liv. Experiência e significado de mentoria: da abordagem socrática à nova ciência da aprendizagem. Boletim Técnico do Senac, v. 46, n. 2, 11 ago. 2020.MOROSINI, Marília et al. A qualidade da Educação Superior e o complexo exercício de propor indicadores. Revista Brasileira de Educação, v. 21, n.64, p.13-37, 2016.ORÉ, Fabio. Reflexiones para una evaluación constructivista. Horizonte de la Ciencia, v. 8, n. 14, p. 87-99. enero-junio 2018. Disponível em: http://revistas.uncp.edu.pe/index.php/horizontedelaciencia/article/view/294. Acesso em: 24 dez. 2020.PERRENOUD, P. Avaliação: da excelência à regulação das aprendizagens – entre duas lógicas. Porto Alegre: Artes Médicas, 1999.PIOVESAN, Armando; TEMPORINI, Edméa Rita. Pesquisa exploratória: procedimento metodológico para o estudo de fatores humanos no campo da saúde pública. Rev. Saúde Pública, São Paulo, v. 29, n. 4, p. 318-325, ago. 1995. Disponível em: https://doi.org/10.1590/S0034-89101995000400010. Acesso em: 28 dez. 2020.POLYDORO, Soely; AZZI, Roberta Gurgel. Apontamentos preliminares: a autorregulação na teoria social cognitiva. In: POLYDORO,Soely (Org.). Promoção a autorregulação da apredizagem: contribuições da teoria social cognitiva. Porto Alegre, RS: Editora Letra 1, 2017.v.1, p. 11-17.QUESADA, Victoria et al. Should I use co-assessment in higher education? Pros and cons from teachers and students’ perspectives. Assessment Evaluation in Higher Education, p. 987–1002, 2019. Disponível em: 10.1080/02602938.2018.1531970. Acesso em 28 dez. 2020.RAMOS-RODRÍGUEZ, Elizabeth; MARTÍNEZ, Pablo Flores; PONTE, João Pedro da. An Approach to the Notion of Reflexive Teacher and Its Exemplification on Mathematics Education. Systemic Practice and Action Research, v.30, n.1, p. 85-102, 2017.RAVELA, Pedro; PICARONI, Beatriz; LOUREIRO, Graciela. ¿Cómo mejorar la evaluación en el aula? Reflexiones y propuestas de trabajo para docentes. Montevidéu: Magro, 2017.RAUEN, F. Roteiros de pesquisa. Rio do Sul: Nova Era, 2006.RODRÍGUEZ-GÓMEZ, Gregorio;IBARRA-SÁIZ, María Soledad. Assessment as Learning and Empowerment: Towards Sustainable Learning in Higher Education. In: PERIS-ORTIZ, Marta; MERIGÓ LINDAHL, José María (Orgs). Sustainable Learning in Higher Education: developing Competencies for the Global Marketplace. Cham (Suiça): Springer International Publishing, 2015, p. 1-20.RUIZ MORALES, Yovanni et al. Evaluación de competencias genéricas en el ámbito universitario a través de entornos virtuales: Una revisión narrativa. Relieve, v. 23, n. 2, p. 1-15. 2017. Disponível em: http://doi.org/10.7203/relieve.23.1.7183. Acesso em: 28 dez. 2020.RUSSELL, Tom; FUENTEALBA, Rodrigo; HIRMAS, Carolina (Orgs.). Formadores de formadores, descubriendo la propia voz a través del self-study. Santiago do Chile: OEI, 2016.SALVAT, Begoña Gros. Aprendizajes, conexiones y artefactos: la producción colaborativa del conocimiento. Barcelona: Gedisa, 2008.SANDRETTO, Susan. Tensiones teórico-metodológicas desde una mirada post estructural, en un proyecto de investigación de self-study colaborativo. In: RUSSELL, Tom; FUENTEALBA, Rodrigo; HIRMAS, Carolina (Orgs.). Formadores de formadores, descubriendo la propia voz a través del self-study. Santiago do Chile: OEI, 2016. p.97-116.SCHUCK, Sandy; RUSSELL, Tom. Self-Study, Amistad crítica y las complejidades en la formación de profesores. In: RUSSELL, Tom; FUENTEALBA, Rodrigo; HIRMAS, Carolina (Orgs.). Formadores de formadores, descubriendo la propia voz através del self-study. Santiago do Chile: OEI, 2016. p.117-132.TOBÓN, Sergio. Evaluación socioformativa. Estrategias e instrumentos. Mount Dora (USA): Kresearch, 2017.WINSTONE, Naomi; PITT, Edd; NASH, Robert. Educators’ perceptions of responsibility-sharing in feedback processes. Assessment Evaluation in Higher Education, Londres, abri., 2020, Disponível em: https://doi.org/10.1080/02602938.2020.1748569. Acesso em: 14 jun.2020.WINSTONE, Naomi et al. Supporting learners' agentic engagement with feedback: A systematic review and a taxonomy of recipience processes. Educational Psychologist, v. 52, n. 1, p. 17–37, 2017. Disponível em: https://doi.org/10.1080/00461520.2016.1207538. Acesso em: 28 dez. 2020.