Mtricas que importan: indicadores clave de desempeo sectorial.

Mxico Evala, 2013.

Un sistema de mtricas clave de desempeo se orienta a promover, presentar y reportar el avance en
trminos de las grandes prioridades del pas derivadas del sistema nacional de planeacin (Ley de
Planeacin y Art. 26 de la Constitucin). Este documento es un mecanismo que puede servir de
insumo bajo este marco normativo para monitorear el avance al desarrollo.
La mayor parte de las economas desarrolladas que utiliza el enfoque a resultados en su sistema de
planeacin, utiliza herramientas de monitoreo y evaluacin (M&E) para:
1) mejorar la efectividad del gasto;
2) avanzar consistentemente en el cumplimiento de los grandes objetivos del pas, y;
3) promover gobiernos enfocados a resultados.
Mxico requiere mantenerse a la vanguardia en mecanismos de monitoreo y evaluacin de la
actividad pblica enfocados a resultados y avanzar en una visin orientada a medir resultados e
impacto y de sus grandes acciones a nivel sectorial.
La propuesta aqu planteada se centra en atender la preocupacin de mantener una desconexin
entre el nivel de acciones y su resultados. Es decir entre un nivel primario de planeacin y la
ejecucin de polticas y programas que derivan de stas metas estratgicas.
Sin un enfoque a resultados nuestro gobierno podr seguir recibiendo recursos crecientes de gasto
sin que ello garantice obtener avances, resultados e impacto en lo que importa para el desarrollo del
pas.
El sistema de monitoreo y evaluacin mtricas que importan de Mxico Evala ofrece tableros de
control a nivel sectorial con mtricas clave que derivan de la experiencia internacional y la opinin de
expertos. Es un como elemento estratgico que ayuda a la toma de decisiones de la autoridad. Un
sistema de monitoreo y evaluacin con este enfoque genera confianza y certidumbre sobre el
quehacer pblico ya que informa a los ciudadanos los resultados de las acciones de gobierno en
trminos de fines.
El documento, Mtricas que importan: insumos para la planeacin nacional, presenta una
metodologa de seleccin de indicadores tcnicamente slida y replicable que nos dirige a observar

mtricas relevantes. Este sistema utiliza los indicadores que existen y los contrasta y fortalece con las
mejores prcticas internacionales, haciendo un ejercicio de refinacin con la intervencin de expertos
y autoridades en cada tema.
Este sistema se centra en hacer visibles las grandes prioridades y metas del Plan Nacional, ayudando
a mantener vivo el mensaje del Plan como gua al desarrollo de
los planes sectoriales y prioritarios y transversales de mediano y largo plazo.
Los principales atributos de estos indicadores clave de desempeo sectorial que aqu se presentan
son su sencillez y solidez. Las mtricas propuestas han sido tambin pensadas para que puedan ser
trasladadas, replicadas y monitoreadas a nivel estatal.
Este sistema puede transparentar el desempeo gubernamental y sealar a los responsables de
ejecutar las polticas y alcanzar o no los objetivos planteados ayuda a transitar de una nocin de
apertura y transparencia a una de rendicin de cuentas y responsabilidad efectiva.
Con esta propuesta Mxico Evala busca fortalecer una cultura de evaluacin, ofreciendo a la
autoridad un esquema sencillo de monitoreo y permitir al ciudadano observar si Mxico avanza como
se requiere. El sistema puede ser administrado de forma independiente o conjunta con nuestros
gobiernos. Lo importante es garantizar que la informacin sea siempre pblica y de libre acceso.
Cuando seamos capaces de identificar resultados, avances y rezagos en las grandes metas,
estaremos en posibilidad de avanzar un mecanismo para construir una idea de nacin que se
sustente con datos y evidencia los resultados de sus acciones y el uso eficiente de recursos pblicos.
Importancia de los indicadores de desempeo en los sistemas de M&E
Es necesario recalcar que un punto clave en el desarrollo de sistemas de monitoreo y evaluacin de
desempeo son los indicadores que lo componen. An cuando los indicadores existan en suficiencia,
estos deben contar con requisitos mnimos que aseguren verificar su calidad y pertinencia para el fin
que persigue el instrumento o herramienta.
Es evidente la disponibilidad de una gran diversidad y multiplicidad de indicadores en diversas reas.
Contar con una gran cantidad de indicadores lejos de ser una importante ventaja puede ser tambin
una limitante de consideracin para los sistemas eficientes de M&E. Puede, por ejemplo, ser nocivo y
distorsionador el observar mtricas inadecuadas o errneas para atender un problema, ya sea por

que no atiende a sus causas y reas de mejora o a lo mejor puede promover incentivos perversos o
afectaciones secundarias al medir resultados y dar recomendaciones con base en una medicin
inapropiada (negative spillovers).
Observamos que las tecnologas disponibles facilitan la tendencia a desarrollar demasiados
indicadores creando sistemas de monitoreo costosos, poco prcticos y muy probablemente utilizados
de forma sub-ptima. Por ello es prioritario invertir tiempo en trabajar para construir escenarios que
evalen opciones de seleccin de los mejores indicadores. Cuando se realiza un trabajo adecuado de
seleccin es posible diferenciar los indicadores que son esenciales de aquellos que son indicadores
deseables, pero no esenciales.
Considerando diversos parmetros para el desarrollo de sistemas de M&E, podemos definir a los
indicadores de desempeo como los instrumentos que permiten medir los insumos, procesos,
resultados y productos de los proyectos, programas o estrategias de desarrollo. Cuando estn
respaldados por buenos sistemas de recopilacin de datos, anlisis e informacin, los indicadores
permiten a los tomadores de decisin seguir los progresos, demostrar los resultados y adoptar
medidas correctivas para mejorar la prestacin de servicios o resultados de programas.
Por tanto stas mtricas se pueden utilizar para fijar objetivos de desempeo y evaluar los progresos
en su consecucin de metas, o bien para identificar los posibles problemas mediante un sistema de
1

alerta temprana para poder adoptar medidas correctivas .

Por ello es de gran utilidad generar lineamientos que sustenten las herramientas de M&E reflejando la
realidad del contexto nacional y tengan como fin de sustentar una seleccin de indicadores basada en
experiencias relevantes. Analizando los objetivos y realidades operativas, as como atendiendo
recomendaciones de expertos para identificar las mtricas y prcticas exitosas en las materias que se
quiera evaluar.
Observamos frecuentemente que los indicadores de desempeo son utilizados como factor decisivo
para determinar la asignacin de factores (recursos fsicos y humanos) cuando son slo son un medio
eficaz para cuantificar los progresos conseguidos en el logro de los objetivos, y permiten facilitar

En Matthew D. McCubbins and Thomas Schwartz, Congressional Oversight Overlooked: Police Patrols versus Fire Alarms,
University of Texas at Austin, se apunta que los sistemas de alerta temprana son una versin del concepto de alarmas contra
incendios (fire alarms), descrito como aquellos sistemas de alerta que se incorporan dentro de un programa o poltica y son en
realidad un sistema costo-eficiente de monitoreo de polticas pblicas.

establecer puntos comparativos de referencia entre las diferentes unidades y poblaciones a lo largo
del tiempo.
Las preferencias ms recientes se inclinan hacia aquellos indicadores que pueden cuantificarse con
los datos disponibles. Indicadores simples y bien acotados. Un ejemplo de ello son los indicadores
clave de desempeo (KPIs) que son mtricas (financieras o no financieras) utilizadas para cuantificar
objetivos que reflejan el rendimiento de una organizacin y que generalmente se compilan como parte
de un proceso de planeacin estratgica. Estos son indicadores mnimos para asegurar la eficiencia y
eficacia de procesos observables y el cumplimiento de sus fines ltimos.
La importancia de los indicadores clave
El uso de indicadores clave de desempeo conlleva ventajas como asentar una base comparable y
objetiva para medir el desempeo y proveer evidencia para la toma de decisiones. Los indicadores
clave, por su cantidad y sencillez son tambin un buen vehculo para realizar benchmarking y facilitar
el entendimiento de un programa por parte de donantes y financiadores, as como para otros agentes
externos que requieren informacin sencilla y oportuna.
No es sencillo transmitir la utilidad de los indicadores clave a la parte operativa de los procesos de
gestin, debido a que su perspectiva es ms amplia y no se enfoca en tareas operativas, ni procesos.
Su enfoque esta en observar resultados en trminos agregados y proveer informacin acotada sobre
una problemtica particular de acuerdo con su evolucin en el tiempo. Sin embargo, a pesar de no
dar respuestas operativas, los indicadores clave son convierten en insumo valiosos para trabajos de
autoridades hacendarias, el Congreso, as como para aproximar a ciudadanos a evaluar las
actividades y resultados de sus gobiernos. Adems, estos indicadores se han convertido en un
standard para integrarlos a bases de datos de organismos internacionales y realizar comparativos
entre naciones.
Los indicadores clave de desempeo son tambin frecuentemente utilizados para generar paneles de
control sobre actividades diversas que deben ser observadas medidas y comunicadas en un solo
reporte. Estos indicadores clave de desempeo tambin se utilizan para integrar la inteligencia de una
agencia gubernamental que puede anticipar alguna vulnerabilidad u oportunidad que requiera una
intervencin inmediata. Un ejemplo en mbito de observacin sectorial es la labor de las oficinas de
presidencia o del ejecutivo, como la OMB de la Casa Blanca donde a travs de un sistema de anlisis

a nivel de sector y agencia se informa la conformacin de los nuevos presupuestos , o bien un

mecanismo de alcance transversal como lo tiene Australia donde las directrices de desempeo que
emanan del ejecutivo son de observancia general.
Este enfoque que promueve la observacin de mtricas clave de desempeo es til al construir un
mecanismo que sintetice la informacin til, dentro del cmulo de informacin disponible. Su
estructura sin embargo debe ser cuidadosamente estructurada para integrar indicadores relevantes
mediante rigurosos mtodos de seleccin. La seleccin de indicadores relevantes contempla un
anlisis acucioso realizado por los expertos en las temticas especficas. Los estudiosos en temticas,
como salud o educacin, son quienes a travs del tiempo se han familiarizado con las mtricas
existentes y aquellas reconocidas a nivel internacional que son parmetro y referencia en trminos de
su efectividad.
Hoy da hay ineficiencias en las mediciones que buscan proveer mejoras a las polticas pblicas. Esto
debido a que ya sea por que los esfuerzos no se enfocan en observar la mtrica adecuada, o no se
estructura su observacin con el rigor que se requiere para generar evidencia precisa, terminamos
3

por escoger mtricas errneas para medir resultados .

Por otra parte, la definicin de indicadores para por una discusin entre los actores relevantes,
requiere partir de un intercambio constructivo que discierne el entendimiento del uso que se dar a
los indicadores en trminos de toma de decisiones relativas a la gestin. Se debe resaltar que los
sistemas dependen en buena medida de estadsticas oficiales fidedignas, consistentes, relevantes y
oportunas para sentar las bases al desarrollo de un buen modelo de monitoreo y evaluacin.
Las mtricas que importan sern utilizadas para monitorear los avances de la Administracin en el
sexenio 2013-2018. Son un paso para construir un sistema de observacin de desempeo orientado
a resultados e insumo para un sistema nacional de indicadores.
La visin de indicadores estratgicos se traslad a al desarrollo de planes sectoriales que sean la
conexin para el reporte de avances y resultados. Ya que hoy existe una desconexin funcional entre
el nivel estratgico de planeacin y el nivel operativo de monitoreo de la gestin. Es decir, que el nivel
de planeacin donde se establecen las metas mas importantes (primarias), disminuyendo la
importancia relativa a reportar en trminos de indicadores y metas de gestin a nivel programtico
presupuestal.

2Hablamos del reporte sobre traslapes, ajustes y eliminaciones del gasto ( Office of Management and Budget). 2012.
3Annual Letter from Bill Gates 2013. Bill & Melinda Gates Foundation.

Es por ello que esta propuesta busca desarrollar un sistema que pueda monitorear de manera
prioritaria resultados en trminos de impacto. Permitiendo alcanzar hitos en el camino a cumplir
metas de largo plazo con visin al desarrollo.
Este enfoque en resultados para el desarrollo puede servir para identificar las mtricas relevantes a
observar, desarrollando para ello informacin e indicadores existentes que cuenten con un enfoque a
resultados. Mxico Evala ha dado un primer paso en este sentido.
Nuestro objetivo es ofrecer al modelo de planeacin y sistema de indicadores que promueve, un
insumo slido que asegure la observacin de los avances de esta nueva Administracin en cuanto al
cumplimiento de sus metas. Nuestra propuesta es generar paneles de mtricas con indicadores
clave de desempeo sectorial que mantengan vivo y vigentes las directrices de los Planes Nacionales
de Desarrollo.
Nos interesa que stas mtricas se observen, pero sobre todo buscamos se promueva un avance
consistente y positivo de las mismas a travs del tiempo.
Metodologa para integracin de indicadores
La metodologa para el desarrollo de este sistema de indicadores estuvo integrada por dos
componentes. Primero, se sigui puntualmente la propuesta del Grupo de Evaluacin Independiente
del Banco Mundial, a travs del manual How to Build M&E Systems to Support Better Government
(Mackay 2007) y Ten Steps to a Results-based Monitoring and Evaluation System (World Bank). En
resumen, estos insumos integran experiencias de buenas prcticas en sistemas de evaluacin
mediante diversos estudios comparativos. Al mismo tiempo, incluyen guas para el diagnstico,
ejemplos de evaluaciones fundamentales y materiales didcticos para comprender herramientas de
monitoreo y evaluacin, entre otros.
Los indicadores fueron integrados y codificados en una base de datos y clasificados de acuerdo a
distintas categoras que permiten identificar su origen, propsito y finalidad, entre otros. A travs de
dicha metodologa, fue posible elegir los componentes para el sistema de indicadores clave de
desempeo (Key Performance Indicators, KPIs), cuya finalidad radica en plantear, monitorear y

evaluar si las polticas pblicas o las prcticas de la administracin pblica federal cumplen, o no,
4

satisfactoriamente sus objetivos anuales o sexenales .

Finalmente, con la ayuda de un grupo de expertos en los temas propuestos para esta primera fase,
se seleccion una batera mnima de indicadores clave con recomendaciones, sugerencias y
contribuciones de cada uno de nuestros expertos. Esta lista genera un panel de control (dashboard)
ilustrativo y dinmico que dar seguimiento a la evolucin del desempeo de los KPIs en el sexenio
2012-2018.

Como mecanismos de refinacin, se definieron cinco pilares para la clasificacin de los indicadores
del PbR-SED e internacionales permite incluir dimensiones adicionales para su anlisis y verificar as
su relacin con cada uno de los objetivos sectoriales. Es pertinente mencionar que estas dimensiones
son en general compartidas por acadmicos y expertos ya que provienen de la prctica internacional.
i)

Equidad: Justifica la igualdad de oportunidades a partir de la implementacin e impacto

de los diversos programas federales.

ii)

Acceso/Cobertura: Extensin territorial y cantidad de beneficiarios que abarcan los

programas federales.

Como base del sistema, se utiliz la metodologa propuesta por la unidad Independent Evaluation Group (IEG) del Banco
Mundial.

iii)

Desempeo: Cumplimiento de obligaciones y objetivos inherentes a cada uno de los

programas, as como su dedicacin y ejecucin de actividades.

iv)

Calidad: Permiten juzgar el valor ex ante y ex post en el mejoramiento de las

condiciones de los programas federales.

v)

Satisfaccin: Basados, principalmente, en encuestas de satisfaccin de los beneficiarios

en cuanto a su relacin con los programas federales.

Tambin es posible hacer una agrupacin que responda a las prioridades del Gobierno Federal
planeadas en su Plan Nacional de Desarrollo (2013-2018).
I. Mxico en Paz
II. Mxico Incluyente
III. Mxico con Educacin de Calidad
IV. Mxico Prspero
V. Mxico con Responsabilidad Global

Los paneles de mtricas clave son una gua de indicadores estratgicos que deben pueden parte los
instrumentos de planeacin nacional, as como de un sistema de indicadores:
De manera instrumental se espera que se consideren este tipo de indicadores clave desde el Plan
Nacional y sean considerados en planes sectoriales, especiales y presupuestales. Solamente as, se
podr tener la certeza de que en la gestin pblica la autoridad mantienen una visin a resultados.
Fuente: Mtricas que importan: indicadores clave de desempeo sectorial. Mxico Evala.
2013.