sábado, 29 de noviembre de 2014

SISTEMAS DE EVALUACIÓN DEL DESEMPEÑO. Mecanismos e Indicadores.

En el sector público se desea, mediante una evaluación, generar conocimiento que permita mejorar la efectividad de las acciones para modificar el contexto en el que y para el que una política o programa público se desarrolla, compara qué es lo que se ha conseguido contra lo que se esperaba conseguir en relación a los resultados.

Es imposible decir con claridad cómo realizar un sistema de evaluación del desempeño (SED), existen tantos de ellos como programas o aspectos a evaluar, es decir, cada SED será desarrollado de acuerdo a los escenarios, necesidades y características propias de la política pública que se evalúa, lo importante es contar con conocimiento pleno del tema a analizar, una idea organizada y acceso a fuentes de información confiables, en términos generales, se busca construir un modelo de la lógica causal de una organización para comprenderla y consecuentemente evaluarla .

Para lograr una adecuada evaluación del desempeño lo más importante es tener claro qué es lo que se quiere saber, por lo tanto es indispensable el completo entendimiento de la misión y visión de la política que se evaluará pues deberá estar íntimamente vinculada con los resultados que se están buscando. Por lo tanto un SED será, en sentido figurado, un mapa de ruta que nos indicará si estamos en el camino adecuado en el logro de los objetivos inicialmente planteados.

Al preparar una evaluación del desempeño, es necesario considerar lo siguiente:
- ¿Evaluará los procesos, los resultados, o ambos?
- ¿En qué condiciones y escenarios se va a realizar?
- ¿Se va a realizar en una situación real (ideal) o a través de simulaciones (pilotos)?
- ¿Qué indicadores serán evaluados?
- ¿Se empleará un solo procedimiento o técnica o se combinarán varias de ellas?

Las características de la evaluación del desempeño deberán ser:
- Está fundamentada en normas o estándares que describen los resultados o impactos esperados.
- Dichos estándares incluyen criterios que describen lo que se considera "bien hecho"
- No existen patrones uniformes que puedan aplicarse a todas las instituciones, regiones o países. Cada institución u organismo oficial tiene que determinar sus propios patrones.
- Posibilita emitir un juicio sobre el aspecto evaluado: competente o no competente.
- Se realiza en situaciones reales, preferentemente.
- No se ciñe a un tiempo específico para su realización; es más bien un proceso que un momento.
Es una herramienta para la orientación del aprendizaje de los aspectos evaluados, y como tal, tiene un importante rol en su desarrollo posterior.
- Es la base para la aprobación o continuación, en términos de recursos.

Para cada criterio a evaluar que se establezca, deben seleccionarse las técnicas y procedimientos mediante las cuales se puede obtener la información requerida.

Entre ellas están:

FUENTES DE INFORMACIÓN GENERAL (EXTERNAS):

- Resultados de evaluaciones, inspecciones y controles realizados con anterioridad.
- Criterios de evaluadores externos, comités científicos y otros.
- Estudios investigativos efectuados y sus resultados, que constituyan la base en la que la iniciativa  pública fue realizada.
- Artículos científicos publicados y evidencia en general que se relacione con las partes evaluadas.
- Criterios obtenidos en reuniones y/o consensos institucionales, nacionales e internacionales.
- Resultados de encuestas nacionales.

FUENTES DE INFORMACIÓN ESPECÍFICAS (INTERNAS):

- Registros anecdóticos, bitácoras internas, portafolios, formatos específicos del programa a evaluar, hojas diarias y otros.
- Resultados de encuestas de satisfacción tanto de usuarios, personas e instituciones con las que se vincula en sus procesos.
- Controles y registros internos sobre operación y productividad.

INDICADORES DEL DESEMPEÑO

Un indicador es una herramienta que nos provee evidencia cuantitativa acerca de si una determinada condición existe o si ciertos resultados han sido logrados o no. Si no han sido logrados, permite valorar el progreso.

Por otra parte, un indicador de desempeño nos entrega información cuantitativa respecto del logro de los objetivos de un programa que a su vez puede cubrir aspectos cuantitativos y cualitativos.

Los indicadores del desempeño forman parte de los elementos básicos de cualquier sistema de evaluación del desempeño, éstos deben estar ligados a la misión, visión, objetivos estratégicos, estrategias, programas y objetivos específicos, conteniendo la información definida de lo que se quiere medir, pues son éstos los que nos darán los valores o cifras que califican la función de un programa o política.

Los indicadores se encuentran divididos en varias clasificaciones según lo que midan:




SEGÚN MIDA

NOMBRE

DESCRIPCIÓN
APLICA PREFERENTEMENTE A









NIVELES DE OBJETIVOS DE LA MIR Y ETAPA DEL PROCESO PRODUCTIVO
ACTIVIDADES (PROCESOS)
Son la acciones emprendidas mediante las cuales se movilizan los insumos para generar los bienes y/o servicios que produce o entrega el programa
N/A
COMPONENTES (BIENES Y SERVICIOS)
Son los bienes y/o servicios que produce o entrega el programa para cumplir con su propósito; deben establecerse como productos terminados o servicios proporcionados
N/A
PROPÓSITO (RESULTADO)
Es el resultado directo a ser logrado en la población o área de enfoque como consecuencia directa de la utilización de los componentes (bienes y/o servicios) producidos o entregados por el programa.
N/A
FIN (IMPACTO)
Es la contribución del programa en el mediano o largo plazo de un objetivo del desarrollo nacional a la consecución de objetivos del PND y/o sus programas.
N/A



CLASIFICACIÓN GRÁFICA DE LA MIR
DE GESTIÓN
Mide el avance y logro en procesos y actividades, es decir, sobre la forma en que los bienes y/o servicios públicos son generados y entregados.
ACTIVIDADES Y COMPONENTES (PROCESOS/BIENES Y SERVICIOS)
DE ESTRATEGIA
Mide el grado de cumplimiento de las políticas y programas públicos, contribuye a corregir y fortalecer las estrategias y la   orientación de los recursos
FIN, PROPÓSITO Y COMPONENTES (IMPACTO, RESULTADO, BIENES Y SERVICIOS)






DIMENSIÓN DEL DESEMPEÑO
EFICACIA
Mide el grado de cumplimiento de un objetivo
ACTIVIDADES, COMPONENTE, PROPÓSITO Y FIN
EFICIENCIA
Mide la relación entre los productos y servicios generados respecto a los insumos y recursos utilizados.
ACTIVIDADES, COMPONENTE Y PROPÓSITO
CALIDAD
Mide atributos, capacidades o características que deben tener los bienes y servicios para satisfacer adecuadamente los objetivos del programa.
COMPONENTE
ECONOMÍA
Mide la capacidad del programa para generar y movilizar adecuadamente los recursos financieros
ACTIVIDADES Y COMPONENTE





Elaboración propia

En esta imagen se aprecia cómo se relacionan entre sí todos los indicadores, independientemente del parámetro que midan, es fácil descifrar el significado de cada uno por la forma en que han sido nombrados, pero para mayor detalle he encontrado una explicación comprensible y más detallada en el siguiente enlace: http://slideplayer.es/slide/98162/

En resumen, cada programa o política debe ser la base de la formación de su propio sistema de evaluación, pues de la información establecida en ésta es que se adquieren las bases para planear dicho sistema y los aspectos de los cuales queremos obtener evidencia numérica de utilidad para la toma de decisiones en virtud de la mejora financiera, mejora de la efectividad/eficiencia de la intervención y la transparencia y rendición de cuentas.



sábado, 22 de noviembre de 2014

PRESUPUESTO BASADO EN RESULTADOS... INSTRUMENTO DE MEJORA INTEGRAL DE LAS INTERVENCIONES PÚBLICAS

En México existen innumerables intervenciones a las que el Estado proporciona fondos para su adecuado desarollo, siempre con el fin de mejorar alguna problemática pública; a pesar de esto, poco sabemos sobre las cantidades colosales de recursos que se consumen en ellas, recursos provenientes de los contribuyenes (impuestos, multas y otros), es decir del erario público.
A lo largo de la historia se ha visto la manera de proporcionar dichos recursos a aquellas situaciones que generan más conflicto entre la sociedad o a lo que promete beneficios sustanciales por un tiempo indeterminado, si lo analizamos desde la perspectiva de ¿Qué es lo que más le conviene al país (viéndolo como un todo: población, infraestructura, servicios, etc)? tendríamos suficientes conflictos para dilucidar la respuesta, habría que planteanos y resolver otras varias preguntas más para tal fin. Podríamos comenzar por ¿Qué intervención genera mayor provecho al país? ¿Cuáles son los programas que ofrecen más y mejores resultados? ¿A quién darle más y a quién menos? a la respuesta del cuestionamiento último la llamaremos Priorización del gasto, piedra angular en la adecuada distribución de los recursos públicos y que desemboca en la sostenibilidad financiera pública duradera.
Los Presupuestos Basados en Resultados (PBR) son instrumentos que surgen ante la necesodad de los gobiernos para fortalecer su legitimidad y funcionalidad dirigiendo fondos a aquéllo que más se necesita y cuya principal función es fortalecer vínculo entre financiamiento y resultados.
Se le conoce como Gestión Basada en resultados al uso de informaicón formal sobre el desempeño para mejorar la eficacia (generación de resultados) y eficiencia (provisión óptima de los servicios y productos) de las intervenciones del Estado, ésta requiere de una adecuada planificación estratégica y enfatiza la necesidad de puntualizar anticipadamente las expectativas de desempeño valiéndose de metas y estándares que puedan, obligadamente, ser medibles. 
La forma más básica es la Presupuestación Programática que es la asignación de recursos para la provisión de servicios y transferencias en la que se incluye un análisis del desempeño desde la fomulación del presupesto gubernamental, donde se clasifica el gasto por objetivos; cabe mencionar que en ésta, la relación entre resultados y financiamiento no es determinante, es decir, si un programa o política no ofrece los resultados esperados no necesariamente se le harán recortes presupuestales o viceversa.
Intentamos desarrollar este tipo de dinámica económica en pro del aprovechamiento de los recursos pero, como en toda nueva tarea, es necesario valernos de mecanismos que faciliten su desenvolvimiento. Para favorecer el vínculo entre financiamiento y resultados se cuenta con tres mecanismos 1. Establecimiento de metas con pleno conocimieto al área en cuestión, con dificultad relativa para que puedan ser alcanzadas. 2. Financiamiento por fórmula que facilita la asignación de recursos por medio de un precio unitario no modificable y 3. Incentivos para financiar resultados, entendidos como el otorgamiento de bonos a las dependencias por buen desempeño.  
Dicho de este modo parece sencillo establecer un presupuesto basado en resultados pero hay un universo complejo detrás de esta actividad que va desde la adecuada formulación de las políticas públicas (con objetivos y metas claras, indicadores de desempeño establecidos bastos y de calidad)  hasta la valoración fiel de las mismas para que puedan ser debidamente financiadas, entre todo esto nos topamos con contaminantes como intereses particulares, carencia de insumos que merman la calidad de los productos o servicios, fallas operativas, ideologías dispares en toda la pirámide humana que interviene en la política y deficiente captura de resultados, todos ellos factores externos que invariablemente afectarán el resultado final. 
Ante esta problemática surge la Evaluación como herramienta vital que, sofisticadamente, estima las políticas con metodologías sistemáticas para valorar OBJETIVAMENTE su diseño, manejo, eficacia y efectividad, siempre considerando si los combios observados a partir de la implementación de la intervención se deben netamente a ésta última o hubo factores ajenos contribuyentes, de modo que es posible identificar los programas, o sus componentes, que son recortables en relación al costo-beneficio, así como las posibilidades de ahorro por medio de mejoras en los productos.
Hablando ya globalmente, tiempo es lo que falta para poder implementar exitosamente estas labores, los países que actualmente las operan de forma cotidiana han tenido que enfretar obstáculos que solo la práctica permite saltar; en nuestro país se ha creado un modelo auxiliar para el PBR, se trata del Modelo Sintético de Información del Desempeño (MSD) que utiliza variables convincentes, sencillas y diminutas que abarcan la totalidad de la política a evaluar, permite evaluaciones por terceros lo que lo hace más transparente y finalmente expone los resultados con calificaciones totalmente procesables por cualquier tomador de decisiones, sea cual sea su área de pericia.
Quedan pendientes variedad de explicaciones en relación a este tema, lo que es rescatable es que en esta materia ya estamos en marcha desde hace poco más de dos décadas, como los diamantes, hay que pulirla para que brillen intensamente sus propósitos más meritorios: La orientación hacia la mejora de la efectividad/eficiencia de los programas y políticas, la Priorización del Gasto y la Transparencia.

Referencias:
Robinson, Marc. MANUAL SOBRE LA ELABORACIÓN DE PRESUPUESTOS BASADOS EN RESULTADOS. 2013. CIDE
Merino, Mauricio. POLÍTICAS PÚBLICAS. 2013. CIDE
http://www.shcp.gob.mx/EGRESOS/PEF/sed/present_pbr_sed.pdf
https://www.youtube.com/watch?v=v5Gfr1q2Ezg

sábado, 15 de noviembre de 2014

EVALUACIÓN INTEGRAL: ¿PARA QUÉ?

Los cambios que nos han conducido hasta el momento en que nos encontramos hoy en día se deben en gran parte a la capacidad evaluativa del hombre, al observar las reacciones en el entorno secundarias a acciones realizadas, por mencionar ejemplos robustos: iniciando con la formación de sociedades erráticas y posteriormente sedentarios debido al desarrollo de actividades (agricultura, pesca, criaderos, etc.) que le permitieron potenciar su calidad de vida sin la necesidad de desplazarse en busca de mejores condiciones. Así de primitiva podemos considerar la evaluación, que evidentemente se presentaba como una cualidad subjetiva de los individuos y no como disciplina.
La Real Academia Española define la voz Evaluación como 1. Señalar el valor de una cosa. 2. Estimar, apreciar, calcular el valor de una cosa. En ambas definiciones se resalta el hecho de VALORAR resultados, y en su concepción estática centrada en los productos y no en los procesos.
El Joint Comitè, 1988 entiende a la evaluación como “un enjuiciamiento sistemático sobre el valor o mérito, para tomar decisiones de mejora de esta definición podemos resaltar el carácter procesual que se le otorga y la cascada de derivada de este proceso que recae en la MEJORA.
Una descripción mayormente holística de la evaluación es la que nos concede Pérez Juste, 1995: “Proceso sistemático, diseñado intencional y técnicamente, de recogida de información, que ha de ser valorada mediante la aplicación de criterios y referencias como base para la posterior toma de decisiones de mejora”. En una visión muy particular adopto esta definición como punto de partida para el entendimiento inicial y básico de la evaluación.
Avanzando de las definiciones, podemos darle uso a la evaluación de acuerdo a nuestra área de interés y pericia.
En relación a las políticas públicas y programas, la evaluación comienza a fungir como herramienta de reciente moda para infinidad de propósitos, entre los destacados:
·        - La resolución de problemáticas sociales. Mediante la identificación, planteamiento y desarrollo de opciones viables para tal fin.
·        - El potenciamiento de programas existentes. Para la renovación de programas que, debido a la transformación social, requieren de actualizaciones que permitan la operación con mejores resultados.
·        - La transparencia y rendición de cuentas. Planteándola como pivote en el ejercicio de cada institución como desarrolladora de políticas y cada individuo como servidor público.
·        - Arma política en favor o desfavor de los actores. Dependiendo el enfoque y los resultados de las evaluaciones para ser usadas en beneficio o perjuicio de quienes impulsan los programas, alterando la visión social de cada actor.
·        - Máximo desempeño de los recursos del erario público. De todos los propósitos es éste el que debe considerarse como prioritario, pues involucra intereses colectivos.
El fin que buscamos en cada evaluación es el aprendizaje.
Hasta ahora hemos llevado a la evaluación al punto protagónico como piedra angular para la toma de decisiones informadas y basadas en evidencias, no debemos obviar la importancia de los evaluadores, en quienes debe prevalecer la prudencia, paciencia, ética, responsabilidad y capacidad para el desarrollo de sus funciones.

Más que una moda creciente es nuestro deber adoptar la evaluación como parte entrañable de cualquier intervención pública, diseñándola de acuerdo los tiempos de maduración y formas de cada política en desarrollo, sin alterar el curso y proceso inherente a la evaluación misma; reconociéndola siempre como colaboradora y no como verdugo.

lunes, 10 de noviembre de 2014

Especialidad comenzando... Revolución mental y sentimiental.

Hoy en día solo aquél que está bien preparado es quien tiene las mejores oportunidades. Por muchas razones es que decidí comenzar este nuevo proyecto, la principal es el crecer profesionalmente.
Dentro de mi área laboral se llevan a cabo, a nivel operativo, variedad de programas que se trabajamos en ocasiones sin saber el verdadero impacto en la salud comunitaria, al contar con las herramientas que obtendré de este posgrado segura estoy de que incidiré sobre la mejora, actualización e implementación de programas que ofrezcan resultados contundentes, sin dejar de lado la parte financiera. En el trabajo del diario me esmero por ofrecer lo mejor de mis conocimientos en favor de la salud de mis pacientes, atendidos de manera individual, me llenaría de inmensa satisfacción traspolar esto aun grado colectivo.
Personalmente porque se adquiere prestigio y con ello mejores oportunidades de trabajo lo que también ofrece un mejor nivel de vida. Quiero dejar a mi familia el legado de la preparación, y el bien hacer por los demás pues el ejemplo más cercano es lo que guía la vida de un ser humano.

En este primer módulo espero dominar al 100% las herramientas de trabajo, conocer a los compañeros y tutores y que formemos un equipo de aportaciones y crecimiento. Deseo adquirir tantos conocimientos como sea posible pues este es el cimiento de toda la estructura que conforma la especialidad, necesita, forzosamente, ser sólido.