Cómo se analizan la eficacia y eficiencia ?

Cómo se analizan la eficacia y eficiencia?

Este análisis completa la evaluación de impacto ya que permite conocer:

• si el impacto fue conseguido (eficacia),

• si el impacto generado justifica el costo de la acción (eficiencia),

• si pueden existir alternativas más eficaces y eficientes para lograr el mismo impacto.

La eficacia de una acción está dada por el grado en que se cumplieron los objetivos previstos en su diseño. Usualmente se recurre a una forma de planificación como el marco lógico, en la cual se establece la jerarquía de objetivos: general, inmediatos, específicos, metas y actividades58.

Para cada uno de los objetivos previstos se analiza la eficacia de la acción que es evaluada, obteniendo un índice general de eficacia mediante una ponderación59 de cada uno de los índices por objetivo evaluado.

En el ejemplo a continuación se muestra, en forma simplificada, el análisis de eficacia de un programa sectorial de formación por competencias. El objetivo propuesto, después de cuatro años, era desarrollar competencias laborales y facilitar el acceso al empleo de expertos soldadores, en razón al crecimiento importante del sector industrial en un país.

Impactos de un programa de formación en el acceso al empleo

Años de ejecución

de la acción Tasa de acceso al empleo en ocupaciones relacionadas con la soldadura Impacto

Grupo de participantes Grupo de control

1

2

3

4

Tasa media empleo

Meta propuesta

Eficacia 75

80

85

70

77.5

90.0

86.1 60

55

65

70

62.5

90.0

69.4 15

25

20

0

15

16.7

El impacto durante los cuatro años de funcionamiento es diferente y en el cuarto año, es cero. Es posible que haya habido otras acciones de formación y que otras personas desarrollaran competencias logrando la misma tasa de inserción laboral que el grupo de participantes.

Por otro lado, la tasa de empleo60 va decreciendo en el tiempo, lo cual envía un mensaje sobre el programa y las competencias que está desarrollando, o sobre el agotamiento del sector en la generación de nuevos puestos de trabajo. Estas son situaciones que surgen durante las evaluaciones y que requieren la utilización de métodos combinados.

El indicador de eficacia se obtiene dividiendo el valor logrado sobre la meta de acceso al empleo que se había previsto: 90%, tanto para el grupo de participantes como para el grupo de control; el impacto es la diferencia del indicador entre los dos grupos. En el ejemplo de arriba hay un impacto positivo de 16,7% en la eficacia de esta formación.

En el caso anterior solo se revisó el impacto y la eficacia para un objetivo, el de acceso al empleo. Normalmente las acciones formativas se trazan otros objetivos, como el incremento de ingresos o la continuidad educativa; el análisis de eficacia se realiza de forma similar pudiéndose efectuar una comparación por cada objetivo, como se presenta a continuación:

Diferentes impactos de un programa de formación y su eficacia

Objetivos de la

acción de formación Tasa de acceso al empleo en ocupaciones relacionadas con la soldadura Impacto

Grupo de participantes Grupo de control

Acceso empleo

Incremento ingresos

Reducción accidentes

Meta empleo

Meta ingresos

Meta accidentes

Eficacia empleo

Eficacia ingresos

Eficacia accidentes 77.5

35.0

85.0

90.0

45.0

80.0

86.1

77.7

106.2 62.5

15.5

60.0

90.0

45.0

80.0

69.4

34.4

75.0 15.0

19.5

25.0

16.7

43.3

31.2

La eficiencia analiza el volumen de recursos gastados para alcanzar las metas. Una actividad eficiente hace un uso óptimo de los recursos y, por tanto, tiene el menor costo posible.

Mientras que el indicador de eficacia es usualmente una tasa porcentual, en el análisis de eficiencia se utilizan indicadores de costo-beneficio o de costo-eficiencia.

El análisis de la eficiencia es utilizado para comparar entre diferentes alternativas de acciones de formación y se puede realizar ex ante o ex post. En general, siempre que se deban revisar opciones de inversión para emprender acciones o reorientarlas, la búsqueda de un costo eficiente es requerida y este tipo de análisis la facilita.

Ejemplo: analizar la opción más eficiente, entre dos, para desarrollar un programa de formación en una comunidad rural apartada. Una, es la de construir un centro de formación, dotar sus instalaciones, contratar y formar personal; la otra, consiste en utilizar unidades móviles con un “centro itinerante” y equipos fácilmente transportables. Es un típico caso en el que, mediante el cálculo de los costos, se puede hacer una evaluación ex ante de las alternativas e implementar la que se muestre más eficiente.

Para evaluar la eficiencia existen dos tipos de análisis: el costo-beneficio y el costo-efectividad.

Análisis costo-beneficio: se expresa como una relación entre los beneficios obtenidos y los costos incurridos y utiliza como unidad de medida el dinero. En general, en este tipo de análisis se busca una relación beneficio-costo mayor a uno, justamente cuando los beneficios son mayores que los costos61.

Dentro del análisis costo-beneficio se utiliza el indicador conocido como: Retorno de la Inversión(ROI)62 para medir el rendimiento de las inversiones que realizan las empresas en capacitación.

Dentro de los costos se incluyen: pagos a los docentes, salario de los trabajadores separados de sus funciones mientras atendían el curso, el costo de utilizar las instalaciones y el de los demás insumos identificados. Como beneficios se toman la disminución de accidentes laborales, la reducción de productos imperfectos, la disminución de accidentes laborales, la mejora en productividad.

Los beneficios y los costos son traducidos a un valor monetario por los interesados en su medición. Normalmente es fácil calcular estos valores, pero en algunos casos se requiere acuerdo, por ejemplo, sobre cómo medir la variación en la productividad y sobre qué base valorarla.

Una vez sumados los valores de beneficios y costos se puede optar por compararlos directamente o por calcular su valor presente neto si el tiempo de análisis lo amerita.

El ROI se ha utilizado para medir el impacto de la capacitación en experiencias de aplicación del Sistema Integral de Medición y Avance de la Productividad SIMAPRO. En el anexo 7 de este eje se incluye la descripción de un caso.

Otro indicador que se suele utilizar es la Tasa Interna de Retorno (TIR) que define un valor de referencia por encima del cual se considera rentable el programa. Esta tasa hace que el valor presente de un flujo de beneficios y costos, sea igual a cero. La TIR se compara con tasas de interés de otras inversiones alternativas; normalmente se usa para decidir a favor de aquella que ofrezca una tasa de retorno mayor.

Análisis costo-efectividad: es la relación entre los impactos obtenidos (valorados en dinero) y el valor presente de los costos, también en dinero, en que incurrió la actividad desarrollada.

El costo efectividad incluye la posibilidad de traducir ciertos impactos sociales a valores expresados en moneda corriente.

También permite realizar comparaciones entre impactos obtenidos con diferentes alternativas de acción. Las decisiones que se toman con base en esta relación favorecen a los programas más costo-efectivos para ser ejecutados nuevamente o para tomar sus modelos de ejecución como referencia en otros programas de formación.

Análisis costo – impacto

Una relación muy útil consiste en comparar el valor presente de los costos con el valor del impacto obtenido, dando una idea del valor de

...