Introducción

Las Instituciones educativas del siglo XXI, se constituyen como espacios capaces de hacer frente a las nuevas demandas de las sociedades multiculturales y respetuosas de la diversidad. Se organizan en comunidades de aprendizaje con expectativas de éxito respecto al potencial de los estudiantes; con plena conciencia de que todas las personas que la integran enseñan y aprenden, simultáneamente. La gestión del conocimiento se orienta en la democracia para rendir cuentas del cumplimiento de metas que la sociedad les demanda, la evaluación es un espacio privilegiado en la cadena de aprendizajes que potencia la reflexión y la toma de decisiones para reorientar los procesos de enseñanza y de aprendizaje¹.

La rendición de cuentas se ha instrumentado a través de la evaluación educativa que realizan las Instituciones de Educación Superior (IES), tanto interna como externa, como pieza fundamental para aspirar al compromiso social, al empoderamiento y al trabajo colaborativo en las comunidades educativas². Contribuye a la apropiación de una cultura de evaluación congruente con la misión y visión institucionales, pero encauzadas en la responsabilidad social de la Universidad³.

La literatura actual sobre evaluación educativa en educación superior enfatiza la importancia de la colaboración y la innovación de los actores educativos, para conformar comunidades de aprendizaje y alcanzar metas de calidad orientadas socialmente. La calidad convoca a diversos actores, momentos y enfoques para realizarla. En México, el Instituto Nacional de la Evaluación de la Educación, ha definido un esquema de criterios e indicadores de calidad que han sido, también enriquecidos con los grupos de enfoque convocados por los organismos evaluadores⁴.

No obstante, los avances que han permitido la presencia de la evaluación educativa en las IES, han sido más de forma que de fondo para orientar el cambio de las prácticas en torno al curriculum. El uso de las evaluaciones y la utilización de sus resultados ha sido un tema de atención en tres aspectos⁵:

Entre los aspectos resaltados en este estudio, está el hecho de que la evaluación es una práctica orientada a la utilización de sus resultados y a la toma de decisiones, no así a las conclusiones⁵. Así, se puede vislumbrar que la evaluación sucede como práctica instrumental y conceptual pero no de investigación, y tampoco se dirige a las conclusiones que están directamente vinculadas con el empoderamiento de la comunidad para reflexionar sus aciertos. De este modo, la evaluación cumple una doble responsabilidad: por una parte Los programas que adoptan un proceso de evaluación empoderadora están asumiendo responsabilidad por sus propias acciones y están respondiendo, de manera confiable, ante los supervisores y agencias externas que solicitan la evaluación. Al contrario, ante las dos perspectivas: responsabilidad ante sí mismo o la responsabilidad convencional. Están tratando de transitar del enfoque de responsabilidad convencional a la función de auditoría y del enfoque de responsabilidad ante sí mismo a la función de evaluación⁷.

La evaluación educativa que ha tenido lugar en las IES, ha sido más instrumentalista o técnica, lo cual no es suficiente para los retos de conformarse en comunidades para el aprendizaje con impacto social en la formación de recursos humanos. Es necesario transitar del control a la responsabilidad; de la perspectiva eficientista a la de la complejidad; de la jerárquica a la democrática; de la sancionadora a la empoderadora y de la técnica a la sociopolítica⁶.

En la Escuela Nacional de Enfermería y Obstetricia (ENEO), específicamente, se ha vuelto la mirada a la autoevaluación como medio innovador y colaborativo interno, conducido por los propios actores para identificar las necesidades de la institución y realizar un diagnóstico contextualizado. Es por esta modalidad que puede constituirse una comunidad de aprendizaje reflexiva que busca la transformación a partir del diálogo, el consenso y la participación comprometida para analizar la complejidad de los fenómenos educativos en enfermería.

La ENEO cuenta con una experiencia capitalizada de más de dos décadas, para los planes de estudio, la docencia y el aprovechamiento escolar mediante exámenes estandarizados de conocimiento. La función de la evaluación es formativa, aunque no se cuenta con evidencia documentada respecto a los resultados que contribuyen a la orientación de las decisiones para la mejora y al impacto en la formación de recursos humanos de enfermería en las licenciaturas.

La dificultad más clara que enfrenta la evaluación educativa en enfermería, es evidenciar la calidad sostenida en el tiempo y en la redirección de los cambios por los actores, no sólo con datos aislados que se traducen en vacíos de significado para la comunidad que evalúa y la que es evaluada. Actualmente, en la ENEO se genera más información derivada de la evaluación educativa, que la que coadyuva, efectivamente, a la toma de decisiones por parte de la gestión académico-administrativa, los diversos cuerpos colegiados, los docentes y los alumnos.

Respecto a la autoevaluación, es el proceso de valoración de una institución educativa a partir de la información recogida de forma sistemática sobre sus fines y funcionamiento, con la finalidad de apoyar la toma de decisiones y mejorar el aprendizaje: es llevado a cabo por los propios actores⁸.

A diferencia del amplio desarrollo teórico en relación con la evaluación educativa, la autoevaluación tiene apenas significativas referencias de sus prácticas en las instituciones educativas. Surge con influencia de numerosos enfoques, y es una respuesta alternativa a la corriente anglosajona de la rendición de cuentas, la innovación para la mejora de la escuela, así como la del desarrollo organizacional y profesional que guarda proximidad con los modelos de evaluación participativa⁶. (Tabla 1).

La definición de autoevaluación se ha vinculado con las diversas denominaciones del término como son: evaluación interna, revisión interna, y evaluación basada en el centro⁶. Se han llevado a cabo en casi todos los sistemas educativos una variedad de experiencias donde los participantes y responsables de la organización asumen su propia evaluación⁹.

La autoevaluación ha recibido atención del ámbito académico y cuenta en la actualidad con un cierto desarrollo teórico. Sin embargo, éste es nimio pues prevalece la práctica de autorrevisión institucional versus las definiciones oficiales de la autoevaluación en las IES, lo que ha repercutido en la diversidad de significados y modalidades.

El contexto define el término que se utiliza en cuanto a la autoevaluación, en algunos países como Estados Unidos se ve como complemento de la evaluación externa de rendimiento, en otros, se considera un sistema válido en sí mismo para evaluar un centro educativo¹⁰.

La autoevaluación se realiza en los centros educativos, por sí y para ellos mismos¹¹. Es un proceso iniciado en el centro escolar, llevado a cabo por el profesorado con el propósito de encontrar respuestas a problemas; se orienta al diagnóstico de la situación e identificación de necesidades de una comunidad específica¹². Es la mejor vía para juzgar la calidad de los procesos complejos de enseñanza-aprendizaje que tienen lugar en las IES¹³.

La autoevaluación se orienta en la mejora de la institución como finalidad que le da sentido¹⁴. La finalidad de la autoevaluación es el desarrollo profesional y la rendición de cuentas¹⁵. Es una herramienta para el empoderamiento y la gestión basada en el centro¹⁶, para establecer y asumir estándares de rendimiento internos y externos^17,18.

La autoevaluación busca la retroalimentación con base en la construcción de significados compartidos entre los actores de la institución, posibilita el contraste de percepciones y crea vínculos de colaboración; permite construir una visión compartida sobre los beneficios y limitaciones de las prácticas de enseñanza, mediante el debate informado y provee a los actores de información periódica, válida y pertinente para desarrollar sus prácticas dirigidas a consensuar lo que hacemos y cómo deberíamos mejorarlo¹⁹.

El impacto de los programas de innovación-evaluación en los procesos de enseñanza tiene que ver con el conocimiento y sobre la evaluación aplicada, con la interacción entre los participantes en el proceso, con el grado en que el programa de innovación-evaluación forme parte de la institución educativa²⁰.

Algunas definiciones de autoevaluación se comentan a continuación:

Las definiciones anteriores son congruentes con la propia evolución del concepto de evaluación educativa. Se pueden extraer las siguientes características de la autoevaluación⁶:

Con base en estos antecedentes la autoevaluación en enfermería, específicamente en las licenciaturas escolarizadas de la ENEO: la Licenciatura en Enfermería y Licenciatura en Enfermería y Obstetricia²⁸, tuvo como objetivo impulsar la autoevaluación colegiada para identificar las fortalezas y debilidades de planes de estudio, docencia y exámenes para evaluar el aprovechamiento escolar de los alumnos.

La pregunta de investigación fue ¿cuáles son las fortalezas y debilidades de las licenciaturas en enfermería, que los actores con experiencia en evaluación educativa priorizan a través de la autoevaluación colegiada para el plan de estudios, docencia y exámenes?

Método

El estudio fue exploratorio, con muestreo no probabilístico, después de haber analizado los perfiles de los docentes posibles se seleccionaron 27 de los 73 profesores de tiempo completo. La profesión de los participantes fue: dos psicólogos, cinco pedagogos y 20 enfermeros con experiencia en evaluación educativa en las licenciaturas escolarizadas. Se dividieron en tres equipos de acuerdo con su experiencia en evaluación: planes de estudios, docentes y alumnos. Se organizaron en grupos de nueve participantes cada uno durante 14 sesiones totales; cuatro para cada objeto de evaluación y con duración de dos horas cada una. El modelo para la autoevaluación fue Contexto, Insumo, Proceso y Producto (CIPP)²⁹. El modelo ha sido de amplía utilidad en educación superior con diversas perspectivas, ha servido de referencia para evaluar el currículo y programas educativos de nivel superior ²⁰.

Se diseñó un cuestionario de autoevaluación de cada objeto de evaluación con las fases del modelo CIPP. Las dimensiones y preguntas que se consideraron fueron las siguientes:

Contexto: ¿qué necesitamos hacer?, ¿podemos hacerlo?; Insumo: ¿con qué contamos? Se considera la infraestructura física, material y humana; Proceso: ¿qué o cuánto estamos haciendo?; y finalmente, Producto: ¿los resultados son los esperados y si son aceptables?

Resultados

Los 27 profesores laboraban tiempo completo en la ENEO; el 92% fueron mujeres y 8% hombres; 74% de los participantes correspondían a profesionales de enfermería y 26% de otras profesiones de educación con experiencia en evaluación educativa. El diagnóstico mostró 15 fortalezas identificadas para el plan de estudios de la Licenciatura en Enfermería (Tabla 2), pues era nuevo plan en operación y se identificaron también debilidades, pues no contenía los programas de prácticas de las asignaturas ni la definición de los propios campos para realizarlas. El plan de estudios de la Licenciatura en Enfermería y Obstetricia (LEO) estaba actualizado y en operación.

Las fortalezas se orientaron al insumo y de las 22 debilidades del plan de estudios 11(50%) correspondieron al insumo, 4 (18.2) en contexto, 4 (18.2%) en resultados y 3(13.6%) en proceso. (Tabla 3).

En el caso de evaluación de la docencia, se identificaron 5 fortalezas (Tabla 4) y 9 debilidades (Tabla 5). En el primer caso, principalmente, se ubican en el insumo y dos del contexto, mientras que las debilidades se focalizan en los resultados de bajo impacto de esta estrategia institucional.

En el caso de evaluación mediante exámenes muestran cinco fortalezas en total consensuadas por los participantes, las de mayor porcentaje se refieren al proceso (Tabla 6) e identificar las diferentes trayectorias de los alumnos a partir de los aprendizajes evaluados.

Las debilidades de la evaluación de los alumnos mediante exámenes fueron 10 en total (Tabla 7). De las cuales 60% se ubica en los resultados de bajo impacto para tomar decisiones de mejora, para lo que se refiere a los exámenes colegiados y el EPAC, requiere integrar otros conocimientos adicionales a los cognitivos.

Las dificultades institucionales se identificaron en los planes de estudios, especialmente, en el nuevo de Licenciatura en Enfermería que carecía de los programas de práctica, ya que su orientación es teórico-práctica. Las mayores debilidades se ubicaron en el bajo impacto de los exámenes colegiados para valorar el aprovechamiento escolar de los estudiantes del sistema escolarizado. Esto último cobra relevancia para la evaluación formativa comprometida en el currículo.

Discusión

La pregunta que guío el estudio fue identificar las fortalezas y debilidades de los planes de estudio, la evaluación de la docencia y los exámenes colegiados para el fortalecer el aprovechamiento escolar de los alumnos de las licenciaturas escolarizadas en enfermería de la ENEO.

La autoevaluación permitió obtener un diagnóstico de los componentes descritos con ejercicio pionero que favoreció la reflexión, aunque no se establecieron estándares de rendimiento internos y externos referidos en otros estudios¹⁷, dado el carácter indagatorio del estudio.

La evaluación educativa realizada en las Instituciones de Educación Superior, generalmente la realizan para cumplir con las acreditaciones nacionales, de tal suerte que la autoevaluación educativa se convierte en una gestión administrativa burocratizada⁵, esto representa resistencias de los actores para la reflexión interna del cambio que favorece el empoderamiento de la comunidad que la realiza. En este estudio, no se identificaron resultados de impacto de la evaluación realizada en las licenciaturas para los componentes descritos en realidad, el trabajo colegiado que implicó mirarse a sí mismos permitió identificar las áreas más fuertes y débiles en los componentes analizados.

La estructura especifica de cuerpos colegiados dirigidos a revisar y analizar la información recuperada contribuyó no sólo a la reflexión de la comunidad para la mejora, sino también permitió identificar las sinergias necesarias para impulsar el cambio y a los actores responsables de éste. Asimismo, sirvió como guía para el seguimiento en el tiempo.

Una limitación importante del estudio son los participantes, la autoevaluación fue impulsada como una estrategia institucional, y los criterios de inclusión de la muestra fueron la experiencia y el conocimiento experto en materia de evaluación educativa^10,11, no obstante, si se busca conformar una comunidad de aprendizaje, reflexiva⁷ e incluyente, se hace necesaria la participación de todos los actores de la escuela.

La autoevaluación colegiada se orientó en la mejora y no así en la calidad educativa¹³, noción necesaria en próximos ejercicios para juzgar los procesos complejos de enseñanza-aprendizaje, que tienen lugar en la ENEO y que se configuran como parte de la responsabilidad social de esta actividad en la Universidad. El trabajo colegiado y estratégico fue la forma de atender las acciones de mejora¹⁴, ¹⁹ para informar a los órganos colegiados de la escuela.

Conclusiones

La autoevaluación institucional ha sido una modalidad poco referida en la institución. La validez de la información da soporte a la evaluación educativa que se realiza, por ello, resulta relevante realizarla por fases y de forma colegiada, participativa.

La evaluación en enfermería ha seguido la tradición centrada en la opinión del alumno para valorar a los docentes, perspectiva unilateral y limitada para tomar decisiones de mejora en los componentes analizados. También, se basa en la tradición cognitiva del aprendizaje, para valorar los conocimientos de los alumnos mediante exámenes que se realizan por los docentes que participan en las doce academias.

En el caso de la evaluación por exámenes colegiados para mejorar el aprovechamiento de los alumnos, no permitió identificar las decisiones de mejora que toman los docentes, a partir de los resultados obtenidos en sus grupos; lo cual, es una debilidad de la evaluación formativa en la ENEO, pues se carece de un estudio respecto a las decisiones que los docentes y los alumnos toman para superar el riesgo de abandono o reprobación durante el semestre lectivo. Se conocen los riesgos que implica la evaluación centrada en un sólo actor, en tanto es una forma de alteración entre la teoría y la práctica que pone en riesgo la validez de la evaluación que se realiza, por lo tanto es poco justa para integrar a los actores y su contexto.

Finalmente, aunque el modelo teórico y metodológico de base para llevar a cabo la autoevaluación, permitió estructurarla en el contexto de enfermería, es importante consensuar algunas definiciones con todos los participantes para mejorar el trabajo colegiado al iniciar el ejercicio, además considerar que la presencia de un experto en evaluación contribuye a que los grupos operen de forma eficiente y focalizada.