Validation of a tool to evaluate theoretical-practical presentations in Higher Education
DOI:
https://doi.org/10.47197/retos.v67.112987Keywords:
Evaluación Formativa, Universidad, Rúbrica, Evaluación Compartida, Competencias TransversalesAbstract
Introduction: Within the framework of the Europe-an Higher Education Area, formative and shared evaluation is established as a key approach to foster active learning and trans-versal competencies. How-ever, validated tools are needed to support this process in higher educa-tion.
Objective: This study aimed to validate rubric designed to evaluate theo-retical-practical presenta-tions in Primary Education and Sports Science de-grees, integrating self-assessment, peer assess-ment, and teacher assess-ment.
Methodology: A rubric was developed based on specif-ic criteria to measure stu-dent performance. A total of 1,257 evaluations con-ducted by faculty and students were analyzed using exploratory and confirmatory factor anal-yses to ensure the instru-ment's validity and reliabil-ity.
Results: The results con-firmed the rubric's struc-ture and reliability, with adequate fit indices (RMSEA < 0.08; CFI > 0.90). The explained vari-ance reached 57% for theoretical evaluations and 59.85% for practical eval-uations. Significant im-provements were observed in the clarity and organiza-tion of student presenta-tions.
Discussion: The findings align with previous studies, highlighting the positive impact of the rubric on developing competencies such as self-regulation and reflective learning. Areas for improvement were identified in some items to optimize performance.
Conclusions: The validated rubric provides an effec-tive framework for forma-tive evaluation, promoting meaningful learning and active student engage-ment. Its replicability and flexibility position it as a model applicable to various educational contexts.
References
Andrade, H. G. (2000). Using rubrics to promote thinking and learning. Educational Leadership, 57(5), 13–18. https://eric.ed.gov/?id=EJ609600
Andrade, H., & Du, Y. (2005). Student perspectives on rubric-referenced assessment. Practical Assess-ment, Research & Evaluation, 10(3). https://scholarsarchive.library.albany.edu/edpsych_fac_scholar/2
Avendaño, F., & Miretti, M. L. (2007). El desarrollo de la lengua oral en el aula: Estrategias para ense-ñar a escuchar y a hablar. Sevilla: Eduforma.
Bagozzi, R. P., & Yi, Y. (1988). On the evaluation of structural equation models. Journal of the Academy of Marketing Science, 16(1), 74-94. https://doi.org/10.1007/BF02723327
Basurto-Mendoza, S. T., Moreira-Cedeño, J. A., Velásquez-Espinales, A. N., & Rodríguez-Gámez, M. (2021). Autoevaluación, Coevaluación y Heteroevaluación como enfoque innovador en la prác-tica pedagógica y su efecto en el proceso de enseñanza-aprendizaje. Polo del Conocimien-to, 6(3), 828-845. https://doi.org/10.23857/pc.v6i3.2408
Bozkurt, F. (2020). Teacher candidates’ views on self and peer assessment as a tool for student devel-opment. Australian Journal of Teacher Education, 45 (1). https://doi.org/10.14221/ajte.2020v45n1.4
Brookhart, S. M. (2013). How to create and use rubrics for formative assessment and grading. Ascd. Alexandria, VA, USA.
Byrne, B. M. (2013). Structural Equation Modeling with Mplus: Basic Concepts, Applications, and Pro-gramming. Routledge. https://doi.org/10.4324/9780203807644
Cañadas-Martín, L. (2018). La evaluación formativa en la adquisición de competencias docentes en la formación inicial del profesorado de Educación Física. Tesis doctoral, Universidad Autónoma de Madrid, Madrid. https://repositorio.uam.es/handle/10486/684192
Carrizosa, E., & Gallardo, J. (2012). Autoevaluación, coevaluación y evaluación de los aprendizajes. Uni-versitat Oberta de Catalunya. Recuperado de https://www.uoc.edu/pdf/symposia/dret_tic2012/pdf/4.6.carrizosa-esther-y-gallardo-jose.pdf
Chou, C.-P., & Bentler, P. M. (1995). Estimates and tests in structural equation modeling. In R. H. Hoyle (Ed.), Structural equation modeling: Concepts, issues, and applications (pp. 37-55). Sage Publi-cations, Inc.
Fernández, A.M. (2016). La rúbrica como instrumento de evaluación y de aprendizaje. En C. Hamodi. (Coord). Formar mediante la evaluación en la Universidad. Propuestas prácticas útiles para docentes (pp. 53-63). Valladolid: Ediciones de la Universidad de Valladolid.
Fernández García, C. M., Torío López, S., Viñuela Hernández, M. P., Molina Martín, S., y Bermúdez Rey, T. (2008). La comunicación oral como competencia transversal de los estudiantes de pedagogía y magisterio: Presentación del diseño metodológico de una innovación para su trabajo en el aula. Revista de Enseñanza Universitaria, 31, 26–38. http://hdl.handle.net/10651/48628
Fernández López, S. (2007). Cómo gestionar la comunicación en organizaciones públicas y no lucrati-vas. Madrid: Narcea.
Ferrando, P. J., & Lorenzo-Seva U. (2018). Assessing the quality and appropriateness of factor solutions and factor score estimates in exploratory item factor analysis. Educational and Psychological Measurement, 78, 762-780. https://doi.org/10.1177/0013164417719308
Fornell, C., & Larcker, D. F. (1981). Evaluating Structural Equation Models with Unobservable Variables and Measurement Error. Journal of Marketing Research, 18(1), 39-50. https://doi.org/10.1177/002224378101800104
Gairín Sallán, J., & Olmos Rueda, P. (2024). Desarrollo y evaluación de la competencia ‘Aprender a Aprender’. Aula Abierta, 53(3), 285–293. https://doi.org/10.17811/rifie.21274Gibbs, G. (2003). Uso estratégico de la evaluación en el aprendizaje. En S. G. Brown & A. Glasner (Eds.), Evaluar en la universidad. Problemas y nuevos enfoques (pp. 61-75). Madrid: Narcea.
Hair, J. F., Black, W. C., Babin, B. J., & Anderson, R. E. (2014). Multivariate Data Analysis (7th edition). Pearson.
Hortigüela-Alcalá, D., Pérez-Pueyo, A., & López-Pastor, V. (2015). Implicación y regulación del trabajo del alumnado en los sistemas de evaluación formativa en educación superior. Relieve- Revista Electrónica De Investigación Y Evaluación Educativa, 21(1), ME6. https://doi.org/10.7203/relieve.21.1.5171
JASP Team (2023). JASP (Version 0.18.1) [Computer software]. Disponible en: https://jasp-stats.org/
Jiménez, F.; Navarro, V., & Souto, R. (coord.) (2021). Explorando colaborativamente alternativas de evaluación formativa en la universidad. La Laguna (Tenerife): Universidad de La Laguna. http://riull.ull.es/xmlui/handle/915/22232
Jonsson, A., & Svingby, G. (2007). The use of scoring rubrics: reliability, validity and educational conse-quences. Educational Research Review, 2, 130-144. DOI: 10.1016/j.edurev.2007.05.002
Kambourova, M., González-Agudelo, E. M., & Grisales-Franco, L. M. (2021). La autoevaluación del estu-diante universitario: revisión de la literatura. Teoría de la Educación: Revista Interuniversitaria: 33, 2, 2021, 217-264. https://doi.org/10.14201/teri.23672
Kline, R. (2013). Exploratory and confirmatory factor analysis. En Y. Petscher, C. Schatschneider, D. L. Compton (Eds.), Applied quantitative analysis in education and the social sciences (pp. 171-207). Routledge.
Kline, R. B. (2015). Principles and Practice of Structural Equation Modeling (Fourth Edition). Guilford Publications.
Lloret-Segura, S., Ferreres-Traver, A., Hernández-Baeza, A., & Tomás-Marco, I. (2014). El análisis facto-rial exploratorio de los ítems: una guía práctica, revisada y actualizada. Annals of Psychology, 30(3), 1151–1169. https://doi.org/10.6018/analesps.30.3.199361
Lluch Molins, L., & Portillo Vidiella, M. C. (2018). La competencia de aprender a aprender en el marco de la educación superior. Revista Iberoamericana De Educación, 78(2), 59–76. https://doi.org/10.35362/rie7823183
López Guillén, R. G., y Taveras Sandoval, J. (2022). Uso del aprendizaje cooperativo en educación física y su relación con la responsabilidad individual en estudiantes del nivel secundario. Retos, 43, 1–9. https://doi.org/10.47197/retos.v43i0.82607
López Pastor, V. M., González Pascual, M., & Barba Martín, J. J. (2005). La participación del alumnado en la evaluación: la autoevaluación, la coevealuación y la evaluación compartida. Tándem: Didác-tica de la educación física, 17, 21-37. https://www.grao.com/revistas/la-evaluacion-en-educacion-fisica-2584?contenido=354124
López Pastor, V. M. y Palacios Picos, A. (2012). Percepción de los futuros docentes sobre los sistemas de evaluación de sus aprendizajes. Revista Teoría de la Educación: Educación y Cultura en la Sociedad de la Información. 13(3), 317-340. http://campus.usal.es/~revistas_trabajo/index.php/revistatesi/article/view/9143/9376
López-Pastor, V.M. & Pérez-Pueyo, A. (2017). Introducción a la creación y uso de escalas descriptivas y rúbricas. En V. M., López-Pastor, & A. Pérez-Pueyo (Eds.), Buenas prácticas docentes. Evalua-ción formativa y compartida en educación: Experiencias de éxito en todas las etapas educati-vas (pp. 92-115). León: Universidad de León.
MacCallum, R. C., & Austin, J. T. (2000). Applications of Structural Equation Modeling in Psychological Research. Annual Review of Psychology, 51(1), 201-226. https://doi.org/10.1146/annurev.psych.51.1.201
Maldonado-Fuentes, A. C., Peña Vargas, C. S., & Meza Romero, J. C. (2024). Connotaciones atribuidas a la evaluación por futuros docentes de Educación Física en su primer año universitario presencial. Retos: Nuevas Perspectivas de Educación Física, Deporte y Recreación, 51, 75-85. https://doi.org/10.47197/retos.v51.99916
Maldonado Fuentes, A. C., Peña Vargas, C. S., y Meza-Romero, J. C. (2024). Connotaciones atribuidas a la evaluación por futuros docentes de Educación Física en su primer año universitario presencial. Retos, 51, 75–85. https://doi.org/10.47197/retos.v51.99916
Miranda Ullán, R., & Caballero Blanco, P. J. (2024). La evaluación triádica en el Grado Medio de Técnico en Guía en el Medio Natural y de Tiempo Libre: Una propuesta en el módulo de Maniobras con cuerdas. En Á. Pérez Pueyo, D. Hortigüela Alcalá, C. Gutiérrez García, & R. Barba Martín (Coords.), Evaluación formativa y compartida en Educación Física: Fundamentos y experien-cias prácticas en todas las etapas educativas (pp. 735–755). Universidad de León.
Moreno, A. (2021). Instrumentos de evaluación LOMLOE: Tipos y ejemplos. Vírgula Blog. Recuperado de https://virgulablog.es/programacion-didactica/elementos-de-la-programacion-didactica/evaluacion/que-son-los-instrumentos-de-evaluacion/
Nunnally, J. C. (1995). Teoría psicométrica. McGraw-Hill.
Ortiz Ocaña, A. (2015). Enseñanza, aprendizaje y evaluación: una configuración triádica. Tecné, Epis-teme y Didaxis: TED, (37), 87-108. http://www.scielo.org.co/scielo.php?script=sci_arttext&pid=S0121-38142015000100006&lng=en&tlng=es.
Padilla Carmona, M. T., & Gil Flores, J. (2008). La evaluación orientada al aprendizaje en la Educación Superior: Condiciones y estrategias para su aplicación a la docencia universitaria. Revista Espa-ñola de Pedagogía, 66(241), 467–486. https://www.jstor.org/stable/23766196
Panadero, E., Tapia, J. A., & Huertas, J. A. (2013). Autoevaluación: Connotaciones teóricas y prácticas. Electronic Journal of Research in Educational Psychology, 11(2), 551–576. Disponible en: http://www.redalyc.org/articulo.oa?id=293128257012
Pascual-Arias, C., López-Pastor, V. M., & Hortigüela-Alcalá, D. (2023). Estudio longitudinal sobre los efectos del desarrollo de la Evaluación Formativa y Compartida en la Formación Inicial del Pro-fesorado. Cultura, Ciencia y Deporte, 18(55), 5-31. https://doi.org/10.12800/ccd.v18i55.1904
Pérez-Pueyo, Á., Hortigüela Alcalá, D., & Gutiérrez García, C. (2024). La evaluación triádica en los aprendizajes grupales: El proceso de evaluación de los montajes finales con combas en el Estilo actitudinal. En Á. Pérez Pueyo, D. Hortigüela Alcalá, C. Gutiérrez García, & R. Barba Martín (Coords.), Evaluación formativa y compartida en Educación Física: Fundamentos y experien-cias prácticas en todas las etapas educativas (pp. 523–557). Universidad de León
Pérez Pueyo, Ángel. (2016). El Estilo Actitudinal en Educación Física: Evolución en los últimos 20 años. Retos, 29, 207–215. https://doi.org/10.47197/retos.v0i29.38720
Ribera Vázquez, L. (2014). La evaluación como fuente de aprendizaje: Las rúbricas [Trabajo Fin de Máster, Universidad Internacional de La Rioja]. https://reunir.unir.net/handle/123456789/3062
Rodríguez Gómez, G., Ibarra Saiz, M., & García Jiménez, E. (2013). Autoevaluación, evaluación entre iguales y coevaluación: conceptualización y práctica en las universidades españolas. Revista de Investigación en Educación, 2 (11), 198-210. http://agora.edu.es/servlet/articulo?codigo=4734976
Ruay Garcés, R. (2018). La evaluación: una estrategia para desarrollar aprendizajes profundos en el estudiante. Boletín Virtual, 7(8), 46–51. https://revista.redipe.org/index.php/1/article/view/541
Sánchez Mesa, S. J. (2004). La heteroevaluación, coevaluación y autoevaluación como dinamizadores del proceso enseñanza-aprendizaje. Universidad Industrial de Santander. Recuperado de https://noesis.uis.edu.co/bitstreams/21edf8a9-4a76-44c6-bc0b-06a306208664/download
Sánchez Mesa, S. J. (2004). La heteroevaluación, coevaluación y autoevaluación como dinamizadores del proceso enseñanza-aprendizaje [Tesis de especialización, Universidad Industrial de Santan-der]. https://noesis.uis.edu.co/bitstreams/21edf8a9-4a76-44c6-bc0b-06a306208664/download
Sánchez-Oliver, A. J., Carnero-Díaz, Á., Muñoz-Llerena, A., & Bianchi, P. (2025). Proyecto de innovación docente para la implementación de la evaluación formativa en la universidad. In Acciones edu-cativas innovadoras en el ámbito universitario (pp. 85-103). Dykinson.
Spitzer, D. R. (2007). Transforming performance measurement: Rethinking the way we measure and drive organizational success. AMACOM Div American Mgmt Assn.New York, NY, USA.
Tanaka, J. S., & Huba, G. J. (1989). A general coefficient of determination for covariance structure mod-els under arbitrary GLS estimation. British Journal of Mathematical and Statistical Psychology, 42(2), 233-239. https://doi.org/10.1111/j.2044-8317.1989.tb00912.x
Ten Berge, J.M.F., & Kiers, H.A.L. (1991). A numerical approach to the exact and the approximate mini-mum rank of a covariance matrix. Psychometrika, 56, 309-315. https://doi.org/10.1007/bf02294464
Timmerman, M. E., & Lorenzo-Seva, U. (2011). Dimensionality assessment of ordered polytomous items with parallel analysis. Psychological Methods, 16(2), 209-220. https://doi.org/10.1037/a0023353
Velasco-Martínez, L. C., & Tójar Hurtado, J. C. (2017). Uso de rúbricas en educación superior y evalua-ción de competencias. Revista de curriculum y formación del profesorado, 22 (3), 184-208. https://doi.org/10.30827/profesorado.v22i3.7998
Downloads
Published
Issue
Section
License
Copyright (c) 2025 Antonio Jesús Sanchez-Oliver, Francisco José Rodríguez Rojas, Adrián Feria-Madueño, Alejandro Muñoz-López, Ángel Carnero Díaz, Antonio Muñoz-Llerena, Borja Sañudo-Corrales, Miguel Ángel Oviedo-Caro, Moisés Grimaldi-Puyana, Paula Bianchi, Raúl Domínguez, Salva Angosto
This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.
Authors who publish with this journal agree to the following terms:
- Authors retain copyright and ensure the magazine the right to be the first publication of the work as licensed under a Creative Commons Attribution License that allows others to share the work with an acknowledgment of authorship of the work and the initial publication in this magazine.
- Authors can establish separate additional agreements for non-exclusive distribution of the version of the work published in the journal (eg, to an institutional repository or publish it in a book), with an acknowledgment of its initial publication in this journal.
- Is allowed and authors are encouraged to disseminate their work electronically (eg, in institutional repositories or on their own website) prior to and during the submission process, as it can lead to productive exchanges, as well as to a subpoena more Early and more of published work (See The Effect of Open Access) (in English).
This journal provides immediate open access to its content (BOAI, http://legacy.earlham.edu/~peters/fos/boaifaq.htm#openaccess) on the principle that making research freely available to the public supports a greater global exchange of knowledge. The authors may download the papers from the journal website, or will be provided with the PDF version of the article via e-mail.
