Metodo del Marco Logico MML altamente recomendable para quienes desempeñan o aspiran a desempeñar funciones de planificacion, programacion y presupuesto por resultados
La metodología del Marco Lógico para construir indicadores
1.
2.
3.
4.
5. La Matriz del Marco Lógico Fin Propósito Componentes Actividades Resumen Narrativo Indicadores Medios de verificación Supuestos
6. Clasificación lógica de objetivos AMBITO PREGUNTAS CLAVES CATEGORIAS LOGICAS CONTENIDO GENERACION DE OBJETIVOS POLÍTICO ECONÓMICO Y SOCIAL ¿POR QUE REALIZAR EL PROGRAMA? FIN POLITICA PUBLICA EXÓGENA PROPOSITO IMPACTO EN POBLACION GERENCIAL ¿COMO REALIZAR EL PROGRAMA COMPONENTES PRODUCTOS ENTREGADOS ENDÓGENA ACTIVIDADES ACCIONES EMPRENDIDAS
7.
8.
9.
10.
11.
12. Análisis de Población POBLACION SIN PROBLEMA POBLACIÓN POTENCIAL (Población con problema) POBLACION POTENCIAL POSTERGADA POBLACION OBJETIVO POBLACION DE REFERENCIA
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25. Ejemplo de Árbol del Problema Deficiente acceso a centros de salud Contaminación del agua Ambiente contaminado e insalubre Malos hábitos de higiene Vías a centros vecinos en malas condiciones No hay atención en la localidad No hay atención en la localidad Inexistencia de alcantarillado Falta de educación en higiene Falta de educación en higiene Mal manejo de los residuos sólidos Alta tasa de enfermedades en la localidad Alta tasa de enfermedades en la localidad Alta tasa de mortalidad Alta tasa de mortalidad Alta tasa de mortalidad Mayor inasistencia laboral Mayor inasistencia laboral Mayor inasis - tencia y repi - tencia escolar Mayor inasis - tencia y repi - tencia escolar Elevados costos de atención de salud Elevados costos de atención de salud Menor rendimiento Deficiente calificación laboral Postergación de otras necesidades Mayor costo de producción Menor rendimiento Menor rendimiento Deficiente calificación laboral Deficiente calificación laboral Postergación de otras necesidades Mayor costo de producción Postergación de otras necesidades Mayor costo de producción Bajo potencial productivo local Menores remuneraciones Menores remuneraciones Efectos Problema Causas Alto nivel de pobreza Mayor inasistencia laboral Mayor inasis - tencia y repi - tencia escolar Elevados costos de atención de salud
26.
27.
28.
29. Ejemplo de Arbol de Objetivos Menor nivel de pobreza Buen potencial productivo local Fines Situacion deseada Medios Baja tasa de mortalidad Menor inasistencia laboral Menor inasis-tencia y repi-tencia escolar Moderados costos de atención de salud Mayor rendimiento Adecuada calificación laboral Menor costo de producción Priorización de otras necesidades Mayores remuneraciones
30.
31.
32.
33.
34. La Matriz del Marco Lógico Fin Propósito Componentes Actividades Resumen Narrativo Indicadores Medios de verificación Supuestos
35.
36.
37.
38. Ejemplo: Traspaso del Árbol de Objetivos a la Matriz Menor inasis - tencia y repi - tencia escolar Moderados costos de atención de salud Mayor rendimiento Adecuada calificación laboral Menor costo de producción Priorización de otras necesidades Menor nivel de pobreza Buen potencial productivo local Adecuado acceso a centros de salud No hay contami - nación del agua Ambiente descon - taminado y sano Buenos hábitos de higiene Vías a centros vecinos en buenas condiciones Existe alcantarillado Buen manejo de los residuos sólidos Curso de capacitación en higiene personal y manejo de alimentos Mejoramiento del camino a Abancay Construcción de un centro de salud Construcción de una planta de tratamiento Construcción de sistema de alcantarillado Mejorar la recolección y la disposición final Mejoramiento del camino a Andahuaylas tasa de enfermedades en la localidad tasa de enfermedades en la localidad Baja tasa de mortalidad Baja tasa de mortalidad Menor inasistencia laboral Menor inasistencia laboral Menor inasis - tencia y repi - tencia escolar Moderados costos de atención de salud Mayor rendimiento Adecuada calificación laboral Menor costo de producción Priorización de otras necesidades Menor nivel de pobreza Buen potencial productivo local Mayores remuneraciones Mayores remuneraciones Adecuado acceso a centros de salud No hay contami - nación del agua Ambiente descon - taminado y sano Buenos hábitos de higiene Vías a centros vecinos en buenas condiciones Hay atención en la localidad Hay atención en la localidad Existe alcantarillado Existe educación en higiene Existe educación en higiene Buen manejo de los residuos sólidos Curso de capacitación en higiene personal y manejo de alimentos Mejoramiento del camino a Abancay Construcción de un centro de salud Construcción de una planta de tratamiento Construcción de sistema de alcantarillado Mejorar la recolección y la disposición final Mejoramiento del camino a Andahuaylas Fin Propósito Compo- nentes Activi- dades Baja tasa de enfermedades en la localidad Baja tasa de mortalidad Menor inasistencia laboral Mayores remuneraciones Hay atención en la localidad Existe educación en higiene
39.
40.
41.
42.
43.
44. Qué miden los Indicadores CATEGORIA MEDICION Fin Miden las transformaciones estructurales en las condiciones de vida de las personas , en la actividad económica o en el medio ambiente ( que generalmente se producen en el mediano y largo plazo) que pueden tener uno o más programas en el universo de atención y que repercuten en la sociedad en su conjunto. Propósito Se refieren a los efectos directos de un programa sobre su universo de atención. Componentes Se refieren a la cantidad y calidad de los bienes y servicios que se generan mediante las actividades de un programa Actividades Se refieren al seguimiento de las actividades , respecto su avance, a los recursos materiales, al personal y/o al presupuesto.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
60.
61.
Editor's Notes
La MML es una matriz de cuatro filas por cuatro columnas (aunque también las hay de cinco o seis filas y con más o menos columnas). Las columnas suministran la siguiente información: La primera detalla los objetivos del proyecto y las actividades asociadas a éstos, y se conoce también como Resumen Narrativo del Proyecto.. La segunda detalla los indicadores que nos permitiran controlar el avance del proyecto y evaluar sus logros. La tercera nos presenta los Medios de Verificación a los que se recurrirá para obtener los datos necesarios para calcular los indicadores La cuarta presenta los factores externos cuya ocurrencia (Supuesto) es importante para el logro de los objetivos del proyecto. Por su parte, las filas de la matriz presentan información acerca de los objetivos, indicadores asociados a cada uno, medios de verificación a emplear y supuestos efectuados en cuatro momentos diferentes: La primera corresponde a la situación esperada una vez que el proyecto ha estado funcionando por algún tiempo . La segunda presenta la situación esperada una vez concluida la ejecución del proyecto . La tercera detalla lo que debe ser completado (entregado) durante la ejecución del proyecto . La cuarta corresponde a lo que deberá ser realizado durante la ejecución del proyecto. La lógica vertical de la matriz identifica lo que el proyecto intenta lograr, clarifica las relaciones de causalidad (actividades => componentes => propósito => fin) y relaciona estas con los factores externos que pueden afectar los resultados del proyecto. Esta lógica vertical se refleja en la primera y última columnas de la matriz. La lógica horizontal establece como se controlará y medirá el logro de cada nivel de objetivos y de donde se obtendrá la información necesaria para ello (columnas 2 y 3). Constituye así la base para el seguimiento, el control y la evaluación del proyecto.
Para ello es necesario estudiar los distintos medios anotados en el árbol de objetivos, concentrándonos en los de nivel inferior (positivo de las causas últimas). Para cada una de éstos deberemos considerar una acción ( o más de una) que sea factible realizar para contar efectivamente con dicho medio. Por ejemplo, si el medio fuese “pupitres en buenas condiciones”, la acción podría ser “reparación de pupitres”. Una vez identificadas las acciones, es conveniente analizar, en forma preliminar y muy genérica, la viabilidad de realizar cada una de ellas. Ello puede llevar a descartar ciertas acciones que claramente no será posible realizar (por ejemplo, en un proyecto de disposición de residuos sólidos domiciliarios, el enviar estos al sol para que sean quemados).
La MML es una matriz de cuatro filas por cuatro columnas (aunque también las hay de cinco o seis filas y con más o menos columnas). Las columnas suministran la siguiente información: La primera detalla los objetivos del proyecto y las actividades asociadas a éstos, y se conoce también como Resumen Narrativo del Proyecto.. La segunda detalla los indicadores que nos permitiran controlar el avance del proyecto y evaluar sus logros. La tercera nos presenta los Medios de Verificación a los que se recurrirá para obtener los datos necesarios para calcular los indicadores La cuarta presenta los factores externos cuya ocurrencia (Supuesto) es importante para el logro de los objetivos del proyecto. Por su parte, las filas de la matriz presentan información acerca de los objetivos, indicadores asociados a cada uno, medios de verificación a emplear y supuestos efectuados en cuatro momentos diferentes: La primera corresponde a la situación esperada una vez que el proyecto ha estado funcionando por algún tiempo . La segunda presenta la situación esperada una vez concluida la ejecución del proyecto . La tercera detalla lo que debe ser completado (entregado) durante la ejecución del proyecto . La cuarta corresponde a lo que deberá ser realizado durante la ejecución del proyecto. La lógica vertical de la matriz identifica lo que el proyecto intenta lograr, clarifica las relaciones de causalidad (actividades => componentes => propósito => fin) y relaciona estas con los factores externos que pueden afectar los resultados del proyecto. Esta lógica vertical se refleja en la primera y última columnas de la matriz. La lógica horizontal establece como se controlará y medirá el logro de cada nivel de objetivos y de donde se obtendrá la información necesaria para ello (columnas 2 y 3). Constituye así la base para el seguimiento, el control y la evaluación del proyecto.
Para la definición de los distintos niveles de objetivos podemos recurrir al Arbol de Objetivos. En general, los fines (incluida la solución del problema) nos ayudarán a definir el Fin del proyecto, mientras que los medios nos ayudarán en la definición del Propósito y de los Componentes. Por último, para la definición de actividades recurriremos a las acciones. En algunos textos se postula una transposición directa del árbol de objetivos al resumen narrativo del proyecto. Sin embargo, ello rara vez es posible, requiriendose buen juicio y algunos ajustes para obtener un buen resumen narrativo. Puede ser necesario cambiar la redacción y habrá que revisar cuidadosamente que se mantenga la lógica vertical causa-efecto al pasar del árbol de objetivos al resumen narrativo. Por ejemplo, a partir del árbol de objetivos antes desarrollado, y suponiendo que se ha seleccionado la alternativa de construir un centro de salud en la localidad y completar esta acción con capacitación en higiene, podrían definirse los objetivos según la correspondencia que se presenta en la siguiente figura. Notese que en este caso se ha asociado el Fin con la solución del problema, pero en algunos casos puede ocurrir que el Fin se defina a partir de algunos de los fines indicados en el árbol y la solución del problema corresponda al propósito del proyecto.. A continuación se analizarán con mayor detalle los distintos niveles de objetivos.
Los indicadores son fundamentales para una buena administración de la ejecución del proyecto y para la evaluación de sus resultados e impactos.Definen metas específicas que nos permiten conocer en que medida se cumplen los objetivos, en cuatro dimensiones: calidad, cantidad cronograma y costos. Además nos permiten analizar la eficacia de los resultados del proyecto y la eficiencia con que éste se ejecutó o se opera. Para ello los indicadores establecen una relación entre dos o más variables. Por ejemplo, entre un incremento porcentual de los ingresos medios de una comunidad (primera variable), en un determinado periodo de tiempo (segunda variable), comparado con el incremento porcentual de los ingresos medios en el país (tercera variable). Las variables pueden ser de tipo cuantitativo (medibles numéricamente) o cualitativo (expresadas en calificativos). Pero, para el cálculo de los indicadores, las variables de tipo cualitativo deben ser convertidas a una escala cuantitativa. Por ejemplo, la opinión de los alumnos acerca de los cursos de un programa de capacitación podría obtenerse al término de cada curso mediante una evaluación en que indiquen si el curso fue excelente, bueno, regular, malo o muy malo. Pero para el cálculo de un indicador basado en esta información será necesrio convertir esta información a una escala cuantitativa. Por ejemplo, podrá asignarse el valor “1” a muy malo, “2” a malo y así sucesivamente, para calcular luego el promedio de todas las opiniones. Así, los indicadores siempre nos entregaran información de tipo cuantitativo, lo cual tiene ventajas respecto a la objetividad del indicador. Es recomendable que los indicadores se discutan y consensuen con los principales involucrados en el proyecto. Ello permite que los resultados de la supervisión y evaluación del proyecto, y las recomendaciones y acciones que surgan de dichos procesos, sean aceptadas con mayor facilidad por los involucrados. Aunque con frecuencia pueden definirse muchos indicadores para cada uno de los niveles de objetivo de un proyecto, es recomendable utilizar el menor número a fin de concentrar los esfuerzos y la atención en unos pocos indicadores relevantes. Un excesivo número de indicadores requiere de mucho esfuerzo para recopilar la información necesaria y calcularlos, distrayendo así la atención del equipo de los objetivos del proyecto. En algunos proyectos, puede ser difícil definir indicadores apropiados. En tales casos es recomendable recurrir a indicadores indirectos (“proxy”). Ante la imposibilidad de medir lo que efectivamente nos interesa, medimos otra variable que tenga una relación lo más directa posible con el fenómeno de interés. Por ejemplo, puede ser muy difícil determinar el nivel real de ingresos de una comunidad por la tendencia usual a subdeclararlos, pero podemos observar sus condiciones de vida (vivienda, electrodomésticos, etc.) de allí inferir si los ingresos han mejorado.
Según el aspecto del logro de los objetivos que miden, se distinguen los siguientes tipos de indicadores: Indicadores de eficacia, que apuntan a medir el nivel de cumplimiento de los objetivos, como por ejemplo: “Incremento porcentual en la cobertura de atención de salud en la localidad a los dos años de concluido el proyecto” Indicadores de eficiencia, los cuales buscan medir que tan bien se han utilizado los recursos en la producción de los resultados. Para ello establecen una relación entre los productos o servicios generados por el proyecto y el costo incurrido o los insumos utilizados. Por ejemplo, un indicador de eficiencia sería: “Costo promedio por persona capacitada por mes”. Indicadores de calidad, que buscan evaluar atributos de los bienes o servicios producidos por el proyecto respecto a normas o referencias externas. Suelen ser los más dificiles de definir y de medir, pero son de suma importancia para una buena gestión de los proyectos y para la evaluación de resultados. Por ejemplo, en un proyecto frutícola un indicador de calidad podría ser: Porcentaje de la fruta cosechada en una temporada que califica para exportación (calibre, color, etc). Indicadores de costo, que relacionan el costo programado con el incurrido en las actividades del proyecto (presupuestado versus real). Por ejemplo, “Costo efectivo de cada curso / costo presupuestado”
Según el aspecto del logro de los objetivos que miden, se distinguen los siguientes tipos de indicadores: Indicadores de eficacia, que apuntan a medir el nivel de cumplimiento de los objetivos, como por ejemplo: “Incremento porcentual en la cobertura de atención de salud en la localidad a los dos años de concluido el proyecto” Indicadores de eficiencia, los cuales buscan medir que tan bien se han utilizado los recursos en la producción de los resultados. Para ello establecen una relación entre los productos o servicios generados por el proyecto y el costo incurrido o los insumos utilizados. Por ejemplo, un indicador de eficiencia sería: “Costo promedio por persona capacitada por mes”. Indicadores de calidad, que buscan evaluar atributos de los bienes o servicios producidos por el proyecto respecto a normas o referencias externas. Suelen ser los más dificiles de definir y de medir, pero son de suma importancia para una buena gestión de los proyectos y para la evaluación de resultados. Por ejemplo, en un proyecto frutícola un indicador de calidad podría ser: Porcentaje de la fruta cosechada en una temporada que califica para exportación (calibre, color, etc). Indicadores de costo, que relacionan el costo programado con el incurrido en las actividades del proyecto (presupuestado versus real). Por ejemplo, “Costo efectivo de cada curso / costo presupuestado”
Un buen indicador debe poseer las siguientes características; Ser objetivo, lo cual quiere decir que debe ser independiente de nuestro modo de pensar y sentir. Nuestro punto de vista y nuestras emociones no deben influir en el indicar en forma alguna. Por ejemplo utilizar como indicador del logro de un objetivo el valor promedio de un puntaje asignado por los miembros del equipo del proyecto no sería para nada objetivo. Si lo sería un indicador tal como “Incremento mensual en el número de capacitados”. Ser medible objetivamente, es decir, tampoco debe influir en la medición del indicador nuestro modo de pensar y nuestros sentimientos. Por ejemplo, basar un indicador en los resultados de una encuesta aplicada a un grupo seleccionado “a dedo” por un integrante del equipo del proyecto sería incorrecto. Para que la medición fuese objetiva la encuesta deberái aplicarse a un grupo seleccionado en forma aleatoria. Ser relevante, lo que exige que el indicador mida un aspecto importante del logro del objetivo. De nada sirve un buen indicador (que cumpla con las demás condiciones aquí discutidas), si lo que mide no es importante respecto al objetivo. Por ejemplo, si se quisiera medir la eficiencia con que se realiza el armado de una “mediagua”, el indicador “Número de clavos clavados versus número de clavos que se doblaron” no sería para nada relevante. Ser específico, característica que requiere que el indicador mida efectivamente lo que se quiere medir. Por ejemplo, un indicador definido como “Incremento porcentual anual en el nivel medio de ingreso de la comunidad beneficiada por el proyecto” no sería específico, ya que el incremento de los ingresos podría deberse también a factores externos al proyecto. Un indicador específico podría ser “Diferencia en el incremento porcentual anual de los ingresos medios de los beneficiados por el proyecto respecto de los no beneficiados”. Ser práctico y económico, lo cual requiere que la obtención y el procesamiento de la información para el cálculo del indicador requieran poco trabajo y sean de bajo costo. Por ejemplo, indicador cuyo cálculo requiera hacer extensivas encuestas y la contratación de un econometrista para analizar los resultados no sería práctico ni económico. Debe estar siempre asociado a un plazo, es decir, debe especificarse el período de tiempo para el cual se calculará el indicador (mensual, anual, bi-anual, a los cuatro años de iniciado el proyecto, etc.).
Por último es conveniente señalar que: Pueden requerirse varios indicadores por objetivo para medir distintos aspectos de éste. Por ejemplo, al analizar la disminución de la morbilidad en la población puede ser útil contar con indicadores que nos permitan conocer por separado la disminución de enfermedades bronco-pulmonares y la disminución de enfermedades infecto-contagiosas. En todo caso no debe olvidarse que la MML debe ser un buen resumen de los aspectos más importantes del proyecto, por lo que no debe abusarse en cuanto al número de indicadores para cada objetivo (tres o cuatro suelen ser suficientes). El equipo responsable de ejecutar el proyecto puede requerir de un mayor número de indicadores para su gestión. Estos se tratarán tal como se ha descrito antes, pero no se incorporarán en la MML si no son relevantes para otros involucrados. Por ejemplo, al jefe del equipo podría interesarle conocer el número promedio de horas extras requeridas por los miembros del equipo para completar las tareas encomendadas. Si los impactos se producirán a muy largo plazo o si el costo de estimar el indicador es muy alto, es recomendable buscar indicadores indirectos (“proxy”). Estos son indicadores que miden alguna característica distinta de la deseada, pero que se sabe está altamente correlacionada con la que queremos medir. Por ejemplo, si no existiesen estadísticas sobre morbilidad de la población y fuese muy costoso generarlas, un indicador indirecto de la disminución de la tasa de morbilidad podría ser: “Porcentaje de disminución de la inasistencia escolar por mes”.
MEDIOS DE VERIFICACION Los medios de verificación c orresponden a las fuentes de información, primarias o secundarias, que se utilizará para obtener la información que permitira calcular los indicadores. La existencia de esta columna en la MML tiene la ventaja de obligar a quién formula el proyecto y define los indicadores a identificar fuentes existentes de información. O bien, si estas no están disponibles, a incluir en el diseño del proyecto actividades orientadas a recoger la información requerida. Los medios de verificación pueden incluir: Estadísticas existentes o preparadas específicamente para el cálculo de los indicadores del proyecto. Fuentes posibles de estadisticas son el INE (www.ine.cl) los distintos ministerios (en particular los de Salud, Educación, Vivienda, Trabajo, Interior, Agricultura, Economía y Planificación), distintos servicios (por ejemplo SAG, Registro Civil, Impuestos Internos, Sernapesca) y ciertos organismos internacionales (CEPAL, FAO, OIT, FMI, etc.) y ONG. Por cierto que también en la propia institución que adelanta el proyecto pueden existir estad´siticas útiles para el cálculo de los indicadores. Material publicado que contenga información útil para verificar el logro de los objetivos del proyecto. Puede tratarse por ejemplo de estudios cuyo tema se relacione con el proyecto, publicaciones en periódicos o revistas, tésis universitarias y normas nacionales o internacionales (especialmente para definir las metas). Una buena forma de acceder a material de este tipo con rapidez y a bajo costo es buscarlo en internet. Inspección visual por parte de algún especialista. En particular para verificar el logro de los componentes, tanto en calidad como en cantidad, puede recurrirse muchas veces a la visita de un experto en el tipo de bienes o servicios que el proyecto genera. El resultado de encuestas es un medio de verificación de uso frecuente. Estas pueden haberse realizado con otro fin, o ser ejecutadas específicamente como una actividad del proyecto. Son especialmente útiles en el caso de indicadores cuyo objetivo sea medir calidad. Los informes de auditoría y registros contables del proyecto son medios de verificación que ayudan al calculo de indicadores de costos y de eficiencia.