INTRODUCCIÓN

La educación basada en competencias es un enfoque sistemático del conocer, del desarrollo de habilidades, de la madurez de hábitos mentales y de conducta, que se relaciona con los valores universales y de la disciplina a partir de funciones y tareas precisas¹. La finalidad del proceso de evaluación de competencias es la formación, construcción de aprendizajes y su mejora; y considera la disposición, el momento y el nivel de participación en el proceso².

Para García² et al., se evalúan niveles de logro que articulan saberes de competencias expresados en desempeños, evidenciando procesos y productos. Tobón³ et al. consideran el ritmo y estrategias de aprendizaje de los estudiantes, la cultura, escenarios y actividades que desarrollan competencias.

Según Serrano y Cebrián⁴, la evaluación de competencias demanda mayor participación y responsabilidad del estudiante en el proceso. El alumno es corresponsable con los docentes, familia o tutores de su formación, debe conocer los criterios de evaluación y recibir realimentación para mejorar su desempeño⁵. Para Zarzar⁶, la evaluación del desempeño conjuga conocimientos, habilidades y actitudes, y evalúa indirectamente cada requisito de la competencia.

Por su parte, Fernández⁷ propone fundamentar la evaluación en criterios de calidad y en la capacidad de los estudiantes para movilizar sus recursos, procurar una evaluación formativa informando claramente a los estudiantes dichos criterios, los cuales determinan si está bien hecho lo realizado por el estudiante. Dependiendo de la actividad, contexto y tipo de estudiantes; pueden elaborarse instrumentos para uso del profesor (heteroevaluación) y de los estudiantes (autoevaluación y coevaluación)⁶. Así, la evaluación debe realizarse permanentemente con instrumentos que obtengan información y evidencia para identificar en qué medida y en qué nivel, se alcanzan las competencias, detectando qué sucede en el proceso⁸.

La rúbrica es un instrumento válido para la evaluación de competencias, define las características que debe tener lo utilizado para evaluar y describe claramente lo que observará el evaluador; la rúbrica puede ser holística o analítica⁹. En la holística, se evalúan desempeños centrados en la calidad, dominio o comprensión del contenido específico y de habilidades. En la analítica, se evalúan por separado las partes del producto o desempeño y se suma el puntaje para obtener la calificación total¹⁰.

Por ello, la rúbrica representa un medio para promover el aprendizaje al fomentar una evaluación formativa fundamentada en la clarificación de los criterios de evaluación y en la realimentación a los estudiantes^7,11. Panadero y Jonsson¹², analizan el uso de rúbricas para propósitos de evaluación formativa y encontraron un aumento de transparencia, reducción de ansiedad, ayuda en la realimentación, mejora en la autoeficacia y un soporte en la autorregulación del estudiante.

Por otro lado, la literatura dental define el aprendizaje basado en casos como un método importante para extraer el conocimiento básico aprendido en textos y clases y aplicarlo en un paciente; requiere que los estudiantes recuerden lo aprendido para resolver casos clínicos basados en la práctica clínica¹³. De tal forma, se ponen en práctica las competencias de descripción, diagnóstico y tratamiento adquiridas durante el proceso formativo y requiere su evaluación integral a través de un instrumento como la rúbrica.

Por lo mencionado, el objetivo que guió el presente estudio fue analizar el impacto en las valoraciones que los estudiantes dan al uso de una rúbrica para evaluar presentaciones de casos clínicos.

MÉTODO

Estudio descriptivo con enfoque mixto, a través del diseño de triangulación concurrente, recolectando y analizando simultáneamente datos cuantitativos y cualitativos, explicando las dos clases de hallazgos con resultados estadísticos seguidos por citas cualitativas, así como teoría fundamentada que confirme o no los descubrimientos¹⁴.

Se analizaron las valoraciones que los estudiantes dieron a una rúbrica para evaluar presentaciones de casos clínicos, que se realizó de forma oral y ante todo el grupo, y exigió al estudiante la demostración de saberes teóricos al describir lesiones de la cavidad oral, clínica y radiográficamente; así como saberes prácticos al determinar diagnóstico diferencial y definitivo, pronóstico y plan de tratamiento; aunado a saberes actitudinales al respetar la autonomía y beneficencia del paciente.

Para evaluar, identificando el propósito de aprendizaje y la competencia que desarrolla, se diseñó una rúbrica que ofreció una descripción de la tarea, explicitó los criterios de evaluación y los niveles de desempeño e indicó una escala de calificación; para contribuir en la realización de la tarea, facilitar la autoevaluación y promover la autorregulación del aprendizaje.

Dicha rúbrica fue sometida a jueceo de expertos en el área odontológica y en el área de la educación (local, nacional e internacional), quienes hicieron observaciones de mejora, las cuales fueron atendidas para su validación cualitativa (anexo). La rúbrica fue entregada a los estudiantes al inicio del semestre, para explicarles cómo serían evaluados y provocar una comunicación fluida.

La población correspondió a 1,136 estudiantes de odontología, con una muestra de 422 estudiantes del segundo semestre; las unidades de análisis fueron los grupos 2 y 6 (136 estudiantes). El 98.5% de estos últimos, aportó valoraciones sobre el uso de la rúbrica. Los turnos matutino y vespertino fueron considerados como estratos, diferenciándose por el rendimiento académico, su promedio de bachillerato y por las calificaciones obtenidas en las unidades precedentes a la implementación de la rúbrica.

Se empleó un cuestionario adaptado y traducido de Jonsson¹⁵, con su consentimiento, fue sometido a jueceo de expertos quienes hicieron observaciones de mejora respecto a la contextualización, selección de preguntas y traducción, las cuales fueron atendidas para su validación cualitativa (anexo).

Se analizó una distribución de frecuencias de datos predeterminados medibles cuantitativos que fueron las respuestas a preguntas que cuestionaron en qué medida la utilización de la rúbrica promovió su aprendizaje, facilitó su evaluación y contribuyó a realizar la tarea; en la escala de valoración de cinco grados (1: De ningún modo, hasta 5: Totalmente) y se determinó la puntuación media obtenida.

Asimismo, se cuantificaron datos cualitativos inferidos del lenguaje escrito de las respuestas a preguntas abiertas sobre la forma como fueron evaluados, si benefició o perjudicó la rúbrica, y si algo se debería haber hecho de otra manera; para análisis cuantitativo y cualitativo.

Según Gallego y Raposo¹⁶, para valorar las funciones de la rúbrica y el proceso evaluador basado en rúbricas, según la opinión de los estudiantes, se tienen las siguientes categorías: a) Las características de la rúbrica, b) La modalidad de evaluación, c) El proceso de evaluación y d) La repercusión para el aprendizaje. A partir de estos aspectos, se categorizaron las respuestas de los estudiantes a las preguntas abiertas.

RESULTADOS

En las respuestas a las preguntas cerradas, se encontró que 62.5% del turno matutino y 48.3% del vespertino consideraron que la rúbrica promovió “totalmente” su aprendizaje, 62% del total de mujeres y 44.6% de los hombres. No obstante, 4.8% del turno vespertino y 1.3% del matutino consideraron que la rúbrica promovió “ni mucho ni poco” su aprendizaje, el 8.5% de los hombres (tabla 1).

En el turno matutino, 63.8% consideró que la utilización de la rúbrica facilitó “totalmente” su evaluación, y en el vespertino, 46.7%; un 56.3% de las mujeres y 55.3% de los hombres. Además, 4.8% del turno vespertino informó que la rúbrica facilitó “ni mucho ni poco” su evaluación, el 6.3% de los hombres (tabla 1).

El 63.8% del turno matutino y 46.7% del vespertino reportaron que la rúbrica contribuyó “totalmente” a la hora de realizar la tarea, el 62% de las mujeres y 44.6% de los hombres. Además, 8% del turno vespertino y 1.3% del matutino valoraron que la rúbrica contribuyó “ni mucho ni poco” a la hora de realizar la tarea, el 2.2% de las mujeres y 8.5% de los hombres (tabla 1).

Dentro de los hallazgos en las respuestas a las preguntas abiertas, 54.8% del turno vespertino y 19.4% del matutino indicaron que la rúbrica permite dar a conocer lo que se espera, con respuestas como la siguiente: “Fue muy buena, ya que se informó qué puntos se iban a evaluar para que el estudiante cubriera esos puntos de manera excelente” (tabla 2).

El 17.7% del turno vespertino y 11.1% del matutino señalaron que la rúbrica les permite autoevaluarse: “Para mí fue bueno porque te das cuenta cuanto sabes del tema” (tabla 3). Además, 37% del turno vespertino y 29.1% del matutino informaron que la rúbrica permite una evaluación más objetiva: “Beneficia, porque así tienes bien claro lo que te están pidiendo”. Asimismo, 35.4% del turno vespertino y 19.4% del matutino consideró que la rúbrica muestra cómo serán evaluados: “Bastante justo porque yo sabía la manera en que se me iba a evaluar y los aspectos a evaluar” (tabla 4).

Por otro lado, 37.5% del turno matutino y 11.2% del vespertino señalaron que la rúbrica proporciona retroalimentación del desarrollo del trabajo: “Me parece la manera más adecuada de guiarnos para la elaboración del trabajo y la evaluación del mismo, con gran facilidad para elaborarlo” (tabla 5). El 66.6% del turno matutino y 59.6% del vespertino informaron que la rúbrica les ayuda a comprender las cualidades que el trabajo debe poseer: “La rúbrica te sirve, ya que sabes cómo te van a evaluar y tienes todos los datos para hacer un buen trabajo” (tabla 5).

DISCUSIÓN

Encontramos un impacto positivo en las valoraciones de los estudiantes sobre el uso de la rúbrica, que influye favorablemente en la conciencia del proceso de aprendizaje. Según las respuestas al cuestionario, la rúbrica en la mayoría de los casos promovió totalmente su aprendizaje (tabla 1).

De manera similar, Martínez¹⁷ et al. reportan que la rúbrica coadyuva en el aprendizaje de competencias y que los estudiantes están satisfechos con su uso. Para Cebrián¹⁸ et al., la e-Rúbrica (rúbrica electrónica) ofrece un impacto positivo en el aprendizaje, debido a la concreción de criterios de evaluación, y Jonsson y Svingby¹⁹, señalan que las rúbricas promueven el aprendizaje y/o mejoran la instrucción, al explicitar expectativas y criterios que facilitan la realimentación y autoevaluación.

Nosotras observamos que la mayoría del turno matutino consideró que la rúbrica facilitó totalmente su evaluación, y la mayoría del vespertino opinó que la rúbrica facilitó en gran medida su evaluación (tabla 1). En ese sentido, Jonsson¹⁵ señaló que a través de las rúbricas se transmiten criterios de calidad de la tarea y los estudiantes pueden usarlos para autoevaluarse y apoyar su rendimiento, para mejorar el resultado en la heteroevaluación.

La mayoría valoró que la rúbrica contribuyó totalmente en la realización de la tarea (tabla 1). La tarea fue la presentación de un caso clínico, una actividad de enseñanza-aprendizaje común en las ciencias de la salud, que exige del estudiante la puesta en práctica de saberes cognitivos, prácticos y actitudinales, al demostrar la competencia de diagnóstico y tratamiento. Dicha competencia se puede evaluar con rúbricas, ya que promueven la realimentación y perfeccionamiento del desempeño del odontológo.

Nuestros resultados pueden equipararse a los de Gallego y Raposo¹⁶, respecto a que los estudiantes valoran positivamente utilizar rúbricas, por las virtudes de éstas como por las ventajas del proceso, ya que clarifican criterios de evaluación, contribuyen a la realización de la tarea, facilitan la evaluación y promueven el aprendizaje.

Asimismo, Fernández⁷ y Picón¹¹ afirman que las rúbricas ofrecen instrucciones detalladas para la realización de la tarea, incrementan la transparencia y justicia en la evaluación, y facilitan la comunicación con los estudiantes. Según Reddy y Andrade²⁰, los estudiantes afirman que las rúbricas ayudan a sentirse menos ansiosos acerca de las tareas, a centrar sus esfuerzos para producir un trabajo de mayor calidad y obtener mejores calificaciones.

En el presente estudio, fueron las mujeres las que mayormente valoraron positivamente a la rúbrica en el aprendizaje y en la realización de la tarea; además, se observó que las respuestas que consideraron menos benéfica a la rúbrica fueron otorgadas casi en su totalidad por hombres. Por su parte, Panadero y Jonsson¹² informaron que se han reportado tasas de autoeficacia más altas en mujeres que en hombres, que corresponden a la mayor seguridad de las mujeres cuando se otorgan realimentación.

Otra coincidencia con los hallazgos de Gallego y Raposo¹⁶ es que en las respuestas abiertas, 54.8% del turno vespertino consideró que las rúbricas permiten dar a conocer lo que se espera (tabla 2), es decir, comprender las cualidades demandadas.

Por otro lado, pocos estudiantes señalaron que la rúbrica les ayuda a autoevaluarse, evaluar a los compañeros y a todos los integrantes del grupo por igual (tabla 3), una circunstancia en la que el beneficio de la rúbrica fue percibido en menor grado y puede asociarse a la falta de familiaridad que el estudiante tiene de volverse un sujeto activo en el proceso de evaluación, y de considerar a la rúbrica con fines de autoevaluación y de coevaluación.

Con respecto a la coevaluación, Pascual²¹ et al. señalaron que las puntuaciones medias otorgadas por los alumnos a sus compañeros son altas, comparadas con las otorgadas por el profesor; así, los estudiantes son menos exigentes evaluando y evidencian incoherencia en su proceder.

No obstante, Borjas²² considera que la coevaluación es una oportunidad para el reconocimiento del “yo” en el otro, al identificar progresos y oportunidades de mejora para aprender y consolidar su autonomía. En este sentido, García²³ et al. opinan que a través de la coevaluación el docente puede detectar logros y carencias del grupo basados en la reflexión y participación de los estudiantes. Además, para Solsona²⁴ el uso de la rúbrica desarrolla en los alumnos la competencia de valorar de forma objetiva y constructiva el trabajo propio y ajeno y la competencia de aprender a aprender.

Respecto a la autoevaluación, para Jareño²⁵ et al. cuando el estudiante se autoevalúa percibe que su aportación al grupo es mayor que la que observa el resto del grupo. Por su parte, Barney²⁶ et al. mencionaron que la autoevaluación basada en rúbrica mejora el aprendizaje y disminuye las quejas respecto a las calificaciones, no obstante, se requiere que los estudiantes inviertan tiempo, lo que pudiera parecerles no satisfactorio.

De igual forma, Panadero y Jonsson¹² consideraron que el uso formativo de las rúbricas incluye factores que pueden moderar sus efectos, como el tiempo para revisarlas y que tan claro es el lenguaje en ellas; encontraron que el uso de rúbricas en sí mismo no conduce a mejoras en el desempeño, sino que pueden facilitarlo si se combinan con autoevaluación u otras actividades metacognitivas; además, se necesitan intervenciones largas para producir resultados verdaderamente positivos. No obstante, la rúbrica con fines formativos aumenta la transparencia en la evaluación, reduce la ansiedad, promueve la realimentación, mejora la autoeficacia y autorregulación del estudiante.

Nuestros datos evidencian que un porcentaje importante del turno vespertino consideró que la rúbrica permite evaluaciones objetivas al mostrarles cómo serán evaluados (tabla 4); similar a lo reportado por Raposo y Martínez²⁷, quienes constataron que desde el punto de vista de los estudiantes, la evaluación mediante rúbricas hace que el proceso evaluativo sea “más justo”, “más objetivo” y “más reflexivo”.

Resultados similares, reporta Picón¹¹ para quien la utilización de rúbricas consensuadas garantiza en gran medida prácticas evaluativas justas, con fines formativos y sumativos; así como Serrano y Cebrián⁴, quienes observan que la e-Rúbrica permite a los estudiantes internalizar los criterios de calidad, ofrece justicia en la evaluación y ayuda a los profesores a enfocarse en el aprendizaje.

En el presente estudio se obtuvo que la mayoría de los estudiantes de ambos turnos coincidió en que la rúbrica les ayuda a comprender las cualidades que el trabajo requiere y destacaron la clarificación de criterios de evaluación; fue en el turno matutino donde se notó mayor referencia respecto a que la rúbrica ofrece realimentación del desarrollo del trabajo, lo que repercute de manera directa en el aprendizaje (tabla 5).

A este respecto, Raposo y Martínez²⁷ notaron una mejoría en el aprendizaje a medida que se utilizó la rúbrica, un recurso válido para innovar prácticas pedagógicas orientadas a la mejora y centrar la enseñanza en el aprendizaje. Además, Sáiz y Bol²⁸ encontraron que el estudiante incrementó el proceso de reflexión y de control sobre su aprendizaje, con fines de evaluación formativa.

Según, Rekalde y Buján²⁹, el propio diseño de las rúbricas puede moderar el desarrollo de competencias individuales de cada estudiante. Además, su uso implica solicitar a los estudiantes procesos de reflexión y autoevaluación continuados en el tiempo, para que exista un incremento significativo en el aprendizaje, por tanto se requieren estrategias metodológicas que promuevan un papel destacado del estudiante en el aprendizaje y mayor compromiso en la evaluación^28,29.

CONCLUSIONES

La rúbrica se asoció con una mejora del aprendizaje al clarificar los criterios de evaluación, mismos que otorgan transparencia al proceso y orientan la calidad del desempeño del aprendizaje de la competencia. Además, el impacto positivo de la rúbrica en la evaluación y en la realización de la tarea, se da porque posibilita una evaluación objetiva y justa, que ofrece realimentación para el desarrollo del trabajo.

La formación profesional del odontólogo exige la demostración de ejecuciones, y la rúbrica representa un instrumento que promueve su perfeccionamiento a través de la autoevaluación y autorregulación. Finalmente, se requiere que los estudiantes tomen un papel activo en su aprendizaje, evaluación, y demostración de saberes teóricos, prácticos, valores y habilidades para la convivencia, que cumplan el propósito de mejorar su desempeño.