Evaluación sistemática. Guía teórica y práctica

   Introducción a la evaluación

• La evaluación forma parte de los servicios profesionales en los que constantemente se tiene que estar valorando si están logrando satisfacer las necesidades de los clientes. Para esto último, es importante recabar información oportuna sobre el trabajo evaluativo.
• El proceso de evaluación debe incluir el estudio de las necesidades de los clientes, evaluación de los métodos propuestos además de un seguimiento de los resultados a corto y largo plazo. En este punto es muy importante la autoevaluación en la que las pruebas y evidencias dan a conocer los resultados individuales.
• Las evaluaciones realizadas por los servicios profesionales distan en gran manera en llegar a ser una herramienta completa que permita brindar información para poder realizar un cambio significativo.
• Es una realidad que existen instituciones confiables capaces de llevar su proceso de evaluación de una manera adecuada, sin embargo, es importante recordar que la tarea de evaluar no pertenece únicamente a una institución, más bien es tarea de todos el evaluar su propio trabajo.
• La evaluación tiene como característica el comparar objetivos y resultados. Es el enjuiciamiento sistemático de la valía o el mérito de un objetivo. Su meta esencial es determinar el valor de algo que está siendo enjuiciado.
• Existen diferentes enfoques en relación a lo que significa la evaluación, pero es importante que esta sirva para mostrar un progreso, para identificar fortalezas y áreas de oportunidad y por último que sea un punto de partida hacia la mejora.
• A la hora de evaluar, es importante tomar en cuenta todas las variables y los interesados en los resultados de estas. Las necesidades que unen o separan a los clientes de un determinado servicio son las que deben considerarse como la base para decidir qué tipo de información se debe recopilar y a qué criterios recurrir para determinar la valía y el mérito de un servicio.
• Las bases de la valoración que deben ser tomadas en cuenta a la hora de evaluar algo son: expectativas de los clientes, el mérito o excelencia del servicio en cuestión, hasta qué punto el servicio es necesario (validez potencial), viabilidad y por último la equidad.
• Según Kellaghan (1982) existen siente indicios para que exista la equidad:

1. Los servicios públicos educativos deben estar pensados para toda la población.
2. Todos los sectores de la sociedad deben tener acceso a los servicios.
3. Todos deben de disfrutar de una participación equitativa en la utilización de los servicios.
4. Los niveles de logro no deben ser diferentes para los distintos grupos.
5. Los conocimientos exigidos para alcanzar los objetivos no deben ser sustancialmente distintos para los distintos grupos.
6. Las aspiraciones vitales que persiguen deben ser similares en todos los grupos.
7. El sistema del servicio deberá producir resultados similares en lo que se refiere a la mejora en el bienestar de todos los grupos sociales.

• Cuando se realiza una valoración, es importante tomar en cuenta las perspectivas de valoración como de información con el fin de averiguar el valor de algo. También es importante tomar en cuenta los resultados como un medio para suministrar o no ciertos servicios y mejorar lo que se están ofreciendo.
• Stake, Scriven, Cronbach, indican que la evaluación puede centrarse en un solo producto o servicio o compararlo con otras alternativas válidas. Para esto, es importante tomar en cuenta la audiencia a la cual se está ofreciendo el servicio para conocer el objeto de la evaluación.
• La evaluación debe ser comparativa antes de iniciar un proceso y periódicamente comparativa del proceso y/o la utilización continuada.
• Existen tres utilizaciones generales de la evaluación: asegurar la calidad de un servicio o mejorarla, hacer recapitulaciones o informes y la ejemplificación.
• La investigación y la evaluación son actividades distintas: la primera se dedica a considerar todos los criterios que se utilizan en la determinación de un valor, mientras que la segunda se limita más bien al estudio de ciertas variables que tienen un interés teórico.
• A la hora de planificar una evaluación se debe considerar lo siguiente: valores mencionados al juzgar los resultados, criterios adoptados y cuales deben tener mayor preferencia, si la evaluación es comparativa, cuál es el objetivo de la evaluación.
• Los evaluadores deberán conocer un amplio espectro de técnicas adecuadas y saber cómo aplicarlas en los distintos contextos evaluativos.
• Ejemplos de áreas técnicas: entrevista, informes preliminares, análisis de contenidos, observación, informes técnicos estudios de caso, etc.
• Normas del Joint Committee, mencionan cuatro características importantes para que la evaluación pueda cumplir su función:

1. Debe ser útil
2. Deber ser factible
3. Debe ser ética
4. Debe ser exacta.

• Normas de utilidad: normas para asegurar que una evaluación proporcione las informaciones prácticas que necesita una audiencia. Estas normas son:

1. Descripción de la audiencia: con el fin de poder satisfacer sus necesidades.
2. Credibilidad del evaluador. Ser confiable para que los resultados sean creíbles y reales.
3. Alcance y selección de la información: debe responder a las necesidades y a los intereses.
4. Interpretación valorativa: deben quedar claras las bases para el juicio valorativo.
5. Claridad del informe: resultados entendibles y concretos.
6. Difusión del informe: dar a conocer los resultados.
7. Oportunidad del informe: debe ser oportuno.
8. Impacto de la evaluación: animar a continuar investigando.

• Normas de viabilidad: asegurar que una evaluación sea realista, prudente, diplomática y moderada.

1. Procedimientos prácticos. Problemas mínimos información necesaria.
2. Viabilidad política. Conocer intereses.
3. Eficacia de los costos. Contar con un presupuesto.

• Normas de honradez: asegurar que una evaluación sea legal y ética, ejemplo.

1. Obligación formal
2. Conflicto de intereses
3. Informes completos y claros
4. Derecho del público a saber
5. Derechos humanos
6. Relaciones humanas
7. Información equilibrada
8. Responsabilidad fiscal

• Normas de precisión: asegurar que una evaluación revele y trasmita una información técnicamente exacta.

1. Identificación del objeto
2. Análisis del contexto
3. Descripción de intenciones y procedimientos
4. Fuentes de información fiables
5. Determinar la validez
6. Control sistemático de los datos
7. Análisis de la información cuantitativa
8. Análisis de la información cualitativa
9. Conclusiones justificadas
10. Objetividad del informe

• La evaluación es una actividad humana esencial e inevitable y debe proporcionar una comprensión más amplia y una mejora en la educación.

Reparto de papeles en el trabajo evaluativo

• Todas las personas que se encuentran involucradas en un proceso de evaluación (generales o especialistas) deben conocer cuál es el papel de cada quien, dentro de un proceso, para que de esta manera se haga en un trabajo colaborativo.
• La evaluación alcanza su mejor momento cuando se realiza en equipo.
• Doce papeles básicos que puede desempeñar una evaluación:

1. El cliente de la evaluación: el cliente es la persona o grupo que utilizará los resultados para algún propósito. Si la evaluación consiste en contribuir al máximo a la hora de proporcionar servicios meritorios y válidos a la gente deberán intervenir y aprovechar toda esta serie de clientes. La misión más importante de los programas de preparación para una evaluación es enseñar a los clientes a cumplir con sus responsabilidades.

...