Misión de la evaluación Ayudar a las personas a aprender más y mejor. Detrás de las decisiones , siempre hay personas. Preguntas evaluativas posibles: -¿Cómo distinguir , entre todos los proyectos ejecutados cuáles tuvieron éxito y cuáles no? -¿Cómo reconocer a los que están siendo verdaderamente efectivos en producir un mejoramiento? -¿Con qué grado de eficiencia se desarrollan estos proyectos? -¿Cuál es la relación entre los costos que implica desarrollar el proyecto y los beneficios que logra ? – ¿Cuál es el efecto o impacto del proyecto en los individuos o grupos involucrados ?
Investigación evaluativa 1
La evaluación como proceso cognitivo es un caso particular de la investigación; constituye en sí una forma de producir conocimiento de una situación , cosa o fenómeno específico. Su particularidad consiste en la emisión de un juicio de valor sobre lo que en su realización se ha descubierto o llegado a conocer.
Investigación evaluativa 2 El modelo conceptual para este proceso señala que la evaluación es el resultado que se obtiene al emitir un juicio valorativo sobre lo que muestra el contraste de los desempeños reales de aquello que se evalúa, con los desempeños que se consideran ideales. Desempeños reales Juicios de Desempeños ideales valor = EVALUACIÓN
Investigación evaluativa 3 Tareas implícitas asociadas al modelo: Paso previo : identificar convenientemente lo que se va a evaluar. 1.definir los desempeños que se estiman ideales 2.descubrir los desempeños que se alcanzan en la realidad 3.establecer si existe discrepancia entre ambos desempeños y emitir una conclusión en la forma de un juicio de valor 4. presentar las conclusiones y recomendaciones pertinentes en un informe apropiado
Estándares de desempeño Al establecer los estándares de desempeño óptimo se fijan las bases para afirmar en ellas el juicio de valor producto de la evaluación. Se fijan antes de la realización de la evaluación ¿Quién los fija?- Pueden estar contenidos en principios normativos o legales El evaluador Por acuerdo entre evaluador y quien encarga la evaluación. Para determinar los niveles de desempeño que se observan en la realidad estudiada, se aplican las estrategias cognitivas usadas en la producción del conocimiento : metodología cuantitativa, cualitativa o mixta ( cuantificando lo que es posible de ser cuantificado y tratado estadísticamente y documentado cualitativamente lo que corresponde)
Interrogantes de la investigación evaluativa ¿Cuál es la naturaleza y magnitud del problema que está originando la acción ? ¿Qué acciones pueden ser implementadas para producir un mejoramiento significativo de la situación actual? ¿Quién ha de ser el destinatario de las acciones que se lleven a cabo? ¿Está llegando la intervención a quienes corresponde? ¿Se desarrollan las acciones como se pensó que deberían ser ejecutadas ? ¿Están siendo efectivas las acciones realizadas? ¿Cuál es el costo de la intervención ? ¿Cuál es la relación entre los costos y la efectividad y beneficios que las acciones consiguen? ¿Cómo se pueden mejorar las acciones realizadas?
Finalidad de la investigación evaluativa La investigación evaluativa en educación es la aplicación sistemática de procedimientos de investigación social para averiguar el valor que tiene la conceptualización y diseño de un programa ( proyecto) educativo, su implementación , su ejecución y , por cierto, su utilidad. El programa evaluado puede estar en cualquier campo en que se ejecuten acciones sociales de servicio a personas y grupos de personas.
Condiciones El evaluador dispone de estrategias tanto cuanti como cualitativas. Debe aportar información relevante, válida, confiable y oportuna al proceso de toma de decisiones. La práctica debe cimentarse en una teoría consistente y actualizada. Su aporte debe servir para aumentar el conocimiento existente acerca del problema o necesidad abordado por el programa evaluado o para mejorar la efectividad y la eficacia de éste.
Modelos de evaluación en educación 1 Modelo genérico en cuanto permite distintas instrumentalizaciones de acuerdo a los intereses y manejo de técnicas del evaluador. Se estructura a partir de la consideración de los resultados.
Modelos de evaluación en educación 2 PROYECTO Necesidades Demandas Costos Metas Resultados Retroalimentación Fidelidad Respuesta Eficiencia Efectividad
Patrón de propuesta de evaluación 1 basado en Worthen y Sanders: 1. Fundamentación .¿Cuál es el propósito de la evaluación a realizar? ¿qué se sabrá que ya no se sepa? 2. Objetivos : ¿qué productos generará? (informes) ¿a quiénes resultará útil? ( usuarios, destinatarios) 3. Descripción del proyecto evaluado. -filosofía del proyecto – contenido -objetivos explícitos e implícitos Procedimientos aplicados en el desarrollo del proyecto ( estrategias, medios, etc.) -beneficiarios de las acciones del proyecto ( población a quien se dirigió el esfuerzo) -contexto en que se desarrolló el proyecto.
Patrón de propuesta de evaluación 2 4.Diseño de la evaluación – limitaciones o restricciones que se enfrentan para la ejecución de la evaluación –plan general de la evaluación ( diseño, estrategia) – preguntas que la evaluación ha de responder – información que es necesario obtener para responder a las preguntas – fuentes de datos y métodos que se aplicarán en su recolección – calendarización de la recolección de datos -técnicas para analizar los datos, procesarlos y producir información evaluativa -estándares que se utilizarán ( para contrastar lo observado y permitir la emisión de juicios) -forma en que se entregarán los resultados (informes parciales, único, etc) –presupuesto
Patrón de propuesta de evaluación 3 5. Descripción del informe final -esquema del contenido que incluirá el informe final -utilidad que podría prestar la información evaluativa que se va a generar -discusión de algunos sesgos que podrían introducirse en la evaluación por ser opciones del evaluador ( opción metodológica, por ejemplo)
Ejemplos de diseño “Efectos de un programa educativo de estimulación emocional a lactantes desnutridos “ Diseño ex post facto; se observó en terreno sala de actividades, contenido y orientación de mensajes verbales que emiten las educadoras y los niños durante la actividad pedagógica- “Integración de alumnos deficientes mentales en la escuela básica” , diseño cuasi- experimental; evaluación de diferencias significativas entre dos escuelas básicas experimentales y una , control Un diseño de evaluación es un plan definido para guiar la recolección de datos sobre el objeto de la evaluación. Como tal, señala a quiénes se observará, cuándo y cuántas veces.
Diseños pre-experimetnales
N° 1 Estudio de Caso XO N° 2 Antes- después o pretest-postest OXO N° 3 Comparación sólo después XO O Diseños propiamente experimentales N°4 Antes-después con un grupo control Aleatorizado R O X O R O O N°5 Diseño de Solomon para cuatro grupos R O X O R O O R X O R O Diseños Cuasi-experimentales N° 7 Series Temporales ooooo x ooooo N° 8 Aplicación alternada del tratamiento X1 O XO O X1 0 XO O , etc N° 9 Antes-después con grupo control no equivalente O X O O O DISEÑOS EXHIBIDOS EN EL DIAGRAMA DE FLUJO
| Página siguiente |