Reflexiones en Evaluación Educativa

La razón de ser de la evaluación es servir a la acción; acción educativa debe entenderse desde el punto de vista formativo, que como profesor le debe (pre)ocupar antes de cualquier otra consideración. La evaluación que no ayude a aprender de modo más cualificado (discriminatorio, estructurador, relevante, emancipador, con mayor grado de autonomía y de responsabilidad ...) en los diferentes niveles educativos es mejor no practicarla.   Como dice Stenhouse (1984), "para evaluar hay que comprender. Cabe afirmar que las evaluaciones convencionales del tipo objetivo no van destinadas a comprender el proceso educativo. Lo tratan en términos de éxito y de fracaso". En su opinión, "el profesor debería ser un crítico, y no un simple calificador". Actuando como crítico y no sólo como calificador, &laqno;la valiosa actividad desarrollada por el profesor y los estudiantes tiene en sí niveles y criterios inminentes y la tarea de apreciación consiste en perfeccionar la capacidad, por parte de los estudiantes, para trabajar según dichos criterios, mediante una reacción crítica respecto al trabajo realizado. En este sentido, la evaluación viene a ser la enseñanza de la autoevaluación».   La evaluación es el medio menos indicado para mostrar el poder del profesor ante el alumno y el medio menos apropiado para controlar las conductas de los alumnos. Hacerlo es síntoma de debilidad y de cobardía, mostrándose fuerte con el débil, además de que pervierte y distorsiona el significado de la evaluación.   Como señala Peters, "el éxito del que enseña sólo puede definirse a partir del éxito del que aprende". En el mismo sentido, Cronbach, recoge en una de sus tesis sobre evaluación que "el evaluador es un educador; su éxito debe ser juzgado por lo que otros aprenden". La evaluación no es ni puede ser apéndice de la enseñanza. Es parte de la enseñanza y del aprendizaje. En la medida en que un sujeto aprende, simultáneamente evalúa: discrimina, valora, critica, opina, razona, fundamenta, decide, enjuicia, opta... entre lo que considera que tiene un valor en sí y aquello que carece de él. Esta actividad evaluadora, que se aprende, es parte del proceso educativo, que como tal es continuamente formativo. Si la evaluación no es fuente de aprendizaje, queda reducida a la aplicación elemental de técnicas, reduciendo u ocultando procesos complejos que se dan en la enseñanza y en el aprendizaje. La evaluación educativa es aprendizaje y todo aprendizaje que no conlleve autoevaluación de la actividad misma del aprender, no forma.   Poco pero contundente ...   Recopilación: Prof. Gabriel Molnar

Evaluación y Calidad Educativa (Parte I)

La calidad educativa es una de las expresiones más utilizadas actualmente en el ámbito educativo, como el punto de referencia que justifica cualquier proceso de cambio o programa de acción. En este contexto la eficacia es uno de sus componentes, considerado de mayor importancia y objeto de estudio desde hace unas décadas. Conseguir centros eficaces es uno de los objetivos de la política educativa de muchos países como elemento esencial de calidad. En este marco la evaluación de centros representa un medio para un fin: lograr centros eficaces y de calidad a través de un sistema que nos permita controlar, valorar y tomar decisiones en un proceso continuo y sistemático que facilite un desarrollo progresivo en el logro de los objetivos y de este modo avanzar y construir una educación de calidad, como meta final. En los últimos años venimos asistiendo a un proceso generalizado de evaluación, que trasciende el ámbito de los aprendizajes, en muchos países y a distintos niveles. Se produce un cambio fundamental, de tal forma que, aunque los aprendizajes siguen ocupando un papel prioritario con nuevas alternativas y avances producidos por las aportaciones metodológicas vinculadas a la medida, se amplía el campo de evaluación abarcando sistemas, resultados, procesos, práctica docente, profesorado, centros educativos, etc. Tomando como punto de partida los enfoques conceptuales sobre las organizaciones y considerando a los centros educativos como tales, De Miguel (1989) sugiere la existencia de cinco grandes bloques de agrupamiento de los modelos de evaluación de centros. Estos cinco bloques son los siguientes: a) Los que enfatizan los resultados (outputs). b) Los que enfatizan los procesos internos a la propia organización. c) Los que postulan criterios mixtos o integradores. d) Los que se centran sobre los aspectos culturales de la organización. e) Los que intentan evaluar la capacidad de la propia organización para autotransformarse (evaluación para cambiar). García Ramos (1989), partiendo del propio análisis de De Miguel, extiende a ocho los bloques de agrupamiento de los modelos según el tipo de criterio de evaluación utilizado, esto es, según se ponga el énfasis en: a) Los resultados (outputs). b) La relación entradas-salidas (inputs-outputs). c) Los procesos internos de la propia organización. d) Los aspectos técnicos de la organización. e) Los aspectos culturales de la organización. f) La capacidad de la propia organización para autotransformarse. g) La relación organización-factores humanos. h) Los criterios integradores. Más recientemente, De Miguel y otros (1994) reducen todo a dos grandes bloques, los que enfatizan los resultados y los que enfatizan los procesos internos, y aunque dicen que este agrupamiento puede resultar algo reduccionista, resulta útil, sobre todo ante la dicotomía de planteamientos de orientación sumativa y formativa, y para captar las diferencias entre la investigación centrada en la eficacia escolar y la centrada en su mejora (Clark y otros, 1984; Wimpelberg y otros, 1989). Miles (1974) nos hablaba de diez características de un centro docente sano, que nosotros resumimos en su momento (Escudero, 1980). Estas características nos parecen seguir teniendo interés en el momento presente para valorar la calidad organizativa y funcional de un centro educativo. Las diez características son las siguientes: 1) Objetivos. Los objetivos deben ser claros y aceptados por los miembros del grupo. Además, deben ser alcanzables con los recursos disponibles y apropiados para las demandas del entorno. 2) Buenas comunicaciones. El movimiento de información es una importante dimensión de la salud organizativa de un centro educativo, ya que éste no es un pequeño grupo como para funcionar cara a cara. Es necesaria la comunicación libre de distorsiones de tipo "vertical", "horizontal" y con el entorno que le rodea. La información va de un lado a otro sin especial dificultad, con un mínimo de distorsión. Dentro de la organización sana se detectan bien y rápidamente las tensiones; existe la suficiente información sobre los problemas que hay en el sistema, como para asegurar que puede darse un buen diagnóstico sobre las dificultades existentes. 3) Optima igualación de poder. En una organización sana la distribución de la influencia es relativamente equitativa. Los subordinados (si existe una autoridad formal) pueden ejercer influencias hacia arriba y perciben que su jefe puede hacer lo mismo respecto a su superior inmediato. La actitud básica de las personas en una organización como ésta, frente a los de arriba, los de abajo, y los de los lados, es de colaboración más que de tensión. 4) Utilización de recursos. A nivel organizativo, la "salud" implica que los "inputs" del sistema, en especial los personales, se usan de forma eficaz, esto es, requiriendo un esfuerzo tenso pero racional, lejano de la sobrecarga y el ocio. 5) Cohesión. Una organización sana se conoce a sí misma, en su conjunto y en sus partes, sabe a donde va, conoce sus objetivos y el por qué de los mismos. Cada miembro del centro debe participar de estos principios y sentirse a gusto dentro de la organización, recibiendo su influencia e influyendo en ella. 6) Moral. Esta dimensión implica la idea de satisfacción y bienestar, aunque la satisfacción no sea suficiente para la "salud" porque basándose en aquélla, pueden soslayarse hostilidades y problemas. No obstante, a nivel organizativo parece útil evocar la moral: una suma de sentimientos individuales de satisfacción que apoyan los deseos de realizar esfuerzos. 7) Innovación. Un sistema sano tiende a moverse hacia nuevos objetivos, nuevos procedimientos, a diversificarse a sí mismo y a ir cambiando en alguna medida a través del tiempo. Un sistema de este tipo crece, se desarrolla y cambia, en vez de mantenerse igual y rutinario. 8) Autonomía. La organización sana no responde en forma pasiva a las demandas del exterior, sintiéndose instrumento del entorno, y no responde tampoco a las demandas que percibe en forma rebelde o destructiva. Tiende a mantener, más bien, una cierta independencia del entorno, de forma que las respuestas recibidas en sus relaciones no sean &laqno;determinantes» de su propio comportamiento. 9) Adaptación. La autonomía e innovación tienen relación estrecha con la adecuación o adaptación con el entorno. Si las demandas de éste y los recursos organizativos no están equiparados, se plantean problemas que exigen un nuevo enfoque y una nueva estructura. Un sistema con esta concepción posee la suficiente estabilidad y capacidad de tolerancia como para afrontar las dificultades que se presenten durante el proceso de adaptación. 10) Equilibrio en las técnicas de resolución de problemas. Cualquier organismo, incluido el "sano", tiene problemas, tensiones y dificultades. Lo importante no es la no existencia de problemas sino la forma en que la organización se enfrente con ellos. En un sistema eficaz los problemas se resuelven con un mínimo de energía, de forma que los mecanismos usados para solucionarlos, no sólo no se debilitan, sino que se mantienen y refuerzan. Una buena organización se caracteriza por poseer estructuras y procedimientos para detectar e identificar la existencia de problemas, descubrir las posibles soluciones, aplicarlas y medir su eficacia. En síntesis, un organismo sano es aquel que tiene capacidad, y, de hecho, se autoevalúa permanentemente. Estas diez características tienen un alto grado de interdependencia y creemos que definen un marco apropiado de índices indirectos de calidad, pues se trata de aspectos que indudablemente condicionan en un sentido u otro el funcionamiento del centro, sobre los que parecen existir múltiples evidencias de su influencia en dicho sentido.   Fuente: Revista ELectrónica de Investigación y EValuación Educativa 1997 - Volumen 3 - Número 1 - ISSN 1134-4032 - D.L. SE-1138-94

Evaluación y Calidad Educativa (Parte II)

Bartolomé y otros (1991) llevaron a cabo un análisis de los modelos institucionales de evaluación de centros utilizados en Cataluña, seis en total, a los que añadieron dos europeos (ECIS y GRIDS) y uno americano (DELAWARE). Tras consultar la literatura especializada sobre el tema, este equipo estableció un listado de criterios comparativos agrupados en los cinco bloques siguientes: 1. OBJETIVOS DE LA EVALUACIÓN 1.1. Finalidad: necesidades o decisiones a las que sirve. 1.2. Audiencia de la evaluación: personas principales a las que se les informa de los resultados. 2. OBJETO DE LA EVALUACIÓN Variables o aspectos sobre los que se recoge información categorizadas en: 2.1. Capacidad del sistema: contextuales, organizativas... 2.2. Proceso: durante el desarrollo de actividades. 2.3. Producto: resultados, efectos. 3. METODOLOGÍA DE EVALUACIÓN 3.1. Dinámica del proceso evaluativo: origen de la demanda de evaluación, nivel de formalización y sistematización establecido "a priori" y "durante el desarrollo", ¿quién selecciona las cuestiones evaluativas, temporabilidad, etc.? 3.2. Instrumentos de recogida de información categorizado en: de tipo cerrado (cuestionarios, escalas, etc.), de tipo abierto (entrevistas, registros anecdóticos, etc.) y de tipo mixto (proporción aproximada de uno u otro tipo). 3.3. Fuentes de información: ¿quién debe cumplimentar los instrumentos? 3.4. Estudios de validez y fiabilidad de los instrumentos: constatar SÍ o NO, o matizar en caso necesario. 4. CRITERIOS DE EVALUACIÓN Tipo de criterio que utiliza. "De tipo absoluto": quién y cómo se establecen (basados en estudios o teorías, ordenanzas legales, etc.). "De tipo comparativo": comparaciones entre centros, etc. 5. EL PAPEL DEL EVALUADOR En caso de una "evaluación externa": agente o responsables de la evaluación. En caso de una "evaluación interna": formación de equipo evaluador, presencia o no de un experto o agente externo al centro. A partir de estos criterios establecieron ocho apartados con diferentes subapartados en cada caso, llegando en total a algo menos de medio centenar de potenciales entradas para una tabla de comparación y, consiguientemente, de definición de modelos de evaluación. Las entradas potenciales de la citada tabla de comparación de modelos de evaluación de centros son: 1) Ojetivos, 2) Evaluador, 3) Audiencia primaria, 4) Instrumentos de evaluación, 5) Fuentes de información, 6) Criterios, 7) Dinámica y 8) Objeto de evaluación. Modelos de evaluación de centros A) Modelos centrados en el cumplimiento, que determinan si el centro está operando de acuerdo con determinadas normas o requisitos externamente establecidos, que normalmente enfatizan más los "inputs" y los recursos disponibles que el rendimiento. B) Modelos centrados en el diagnóstico de la mejora de los estudiantes y se apoyan en buena medida en pruebas criteriales antes y después. Tienen un énfasis preferentemente formativo y centran su interés en la búsqueda de fórmulas para cubrir las necesidades detectadas en los alumnos. C) Modelos centrados en el rendimiento, sobre todo a partir de pruebas normalizadas aplicadas al final de los ciclos educativos. Se intenta una evaluación normativa que permita comparación de centros y distritos escolares, transversal y longitudinalmente. En referencia con lo anterior, Gallegos (1994), en su metaevaluación de más de medio centenar de modelos de evaluación americanos, encontró algunos defectos y lagunas muy generalizados. Los más comunes eran los siguientes: Falta de indicaciones claras de que los evaluadores han recibido un entrenamiento adecuado en evaluación de centros. Escasa evidencia de que las evaluaciones están basadas en un conjunto aceptable y reconocido de normas de evaluación de programas y productos. Limitada evidencia de que se comprende y utiliza un enfoque sistemático para la evaluación del centro. Insuficientes intentos de abordar las cuestiones de calidad de manera razonable. Ausencia de indicaciones de que se llevó a cabo o se ha sugerido una metaevaluación de la práctica evaluadora del personal del centro. A estas reflexiones estratégicas podemos añadir las que nos ofrece Nevo (1994) tras cuatro años de trabajo en un experimento de evaluación interna y externa. Las sugerencias son las siguientes: a) La mejor manera de que el personal del centro comprenda el significado de la evaluación es a través de la distinción de lo que es descripción y lo que es valoración o juicio. b) Los estudiantes y su rendimiento no deberían ser el único objeto de la evaluación escolar c) Los resultados o impactos no deberían ser lo único que se examina cuando se evalúa un programa, un proyecto o cualquier otro objeto escolar. d) La evaluación del centro debe tener tanto la función formativa como la sumativa, proporcionando información para la planificación y el perfeccionamiento, así como para la certificación y la rendición de cuentas. e) No se puede juzgar de manera razonable la calidad global de un centro escolar con un sólo criterio, o incluso por criterios múltiples, ni se necesita hacerlo así. f) Las necesidades de evaluación interna de una escuela se atienden de la mejor manera por un equipo de profesores y otros educadores, para quienes la evaluación es solamente parte definitoria de su trabajo, apoyados por un apropiado entrenamiento y asistencia técnica externa. g) Para llevar a cabo evaluaciones internas razonables es necesario utilizar instrumentos y métodos alternativos de las ciencias del comportamiento y de otros campos de estudio relacionados y adaptarlos a las necesidades del centro y a las capacidades del equipo "amateur" de evaluación. h) "Aprender haciendo" sigue siendo todavía la mejor manera de aprender a evaluar. En este sentido, hay que constatar que pese a la gran masa de literatura sobre calidad de la educación en la perspectiva de la gestión (control de calidad, auditoría, valoración, políticas y asignación de fondos, públicos, etc.), el propio concepto de calidad ha quedado en la penumbra. Partiendo de este hecho, Harvey y Green (1993), analizan cinco diferentes concepciones de calidad y su relevancia para la educación superior, que, en mi opinión, constituye una aportación sustantiva al esclarecimiento del constructo y, en consecuencia, a su medida y evaluación. Las visiones de calidad para estos autores son: - Calidad como fenómeno excepcional. - Calidad como perfección o coherencia. - Calidad como ajuste a un propósito. - Calidad como relación valor-costo. - Calidad como transformación (cambio cualitativo).   Fuente: Revista ELectrónica de Investigación y EValuación Educativa 1997 - Volumen 3 - Número 1 - ISSN 1134-4032 - D.L. SE-1138-94