Tips de Evaluación Ex-Ante

 Indígenas Shuar del Ecuador formulando un proyecto sociocultural (Foto: G. Campoverde) 

Uno de los retos más interesantes en consultoría social es, sin duda, realizar la evaluación ex-ante de un proyecto antes de iniciar su ejecución.

En el caso de los proyectos sociales, la evaluación ex ante se refiere a la valoración de un programa o proyecto cuyo objetivo principal es solucionar o mitigar problemas o necesidades que aquejan a una comunidad de personas antes de que éste se ejecute; por eso la evaluación ex ante precede a la asignación de los recursos que permitirán posteriormente su implementación.

La valoración o evaluación ex ante puede basarse en variados tipos de análisis. Entre los más conocidos son el análisis costo-beneficio, costo-impacto, costo -eficiencia y el análisis del diseño basado en la pertinencia y coherencia lógica, entre otros aspectos.

En mi caso, y dado que la mayoría de los programas y proyectos sociales que he evaluado no están orientados a generar renta, en el sentido de empresa o negocio, expondré algunos tips que tienen que ver más bien con el diseño del proyecto, su pertinencia y factibilidad de ejecución.

Así, entre los aspectos más importantes a considerar antes de iniciar el proceso evaluativo en su fase de trabajo de campo, se puede citar:

• Recopilar y analizar toda la información posible respecto de la organización o institución que propone ejecutar el proyecto; es decir, evaluar su currículum institucional (proyectos realizados antes, equipo técnico, auspicios recibidos, etc.).
• Investigar las condiciones de vida de la comunidad beneficiaria del proyecto y sus necesidades o problemática en relación a la temática del proyecto.
• Investigar sobre la organización popular que representará a la comunidad beneficiaria y su experiencia en la participación en procesos similares. Esta información es muy importante, ya que no es lo mismo trabajar con organizaciones populares con experiencia en la ejecución de proyectos que sin experiencia en este asunto…
• Leer detenidamente la propuesta (documento proyecto) e ir realizando anotaciones claves que no conviene olvidar.
  Ya durante el proceso valorativo de la propuesta propiamente dicha, es necesario:
• Observar si el documento proyecto incluye todos los ítems requeridos por la entidad auspiciante, sea esta una agencia de cooperación internacional, una institución estatal, etc.
• Identificar si los objetivos formulados responden a la problemática presentada; es decir, su coherencia lógica. Si la problemática no ha sido bien definida y/o los objetivos planteados no tienen correspondencia con su solución será imposible que el proyecto haya sido bien diseñado.
• Especialmente importante resulta el análisis del Marco Lógico, y en éste mi experiencia me dice que la formulación de indicadores de resultado, medios de verificación, y supuestos son los componentes que mayor dificultad causan a personas sin suficiente experiencia en planificación.
• La estrategia de ejecución planteada es fundamental para el éxito de un proyecto. Conocer, además, los niveles concretos de participación en el proceso de la organización y la comunidad nos permitirá tener insumos para establecer su posible factibilidad.
• Qué tipo de herramientas de monitoreo y evaluación se propone realizar nos ayudará a saber si el proyecto podrá ser redireccionado eficazmente de ser necesario, y si podrá hacerse una valoración objetiva de su proceso de implementación.
• Averiguar si la propuesta fue diseñada con la participación de los beneficiarios o su organización representativa es clave para conocer si la comunidad conoce y se identifica con los objetivos propuestos, y su potencial involucramiento en el proceso proyecto. 

Próxima entrega: Tips de Evaluación Intermedia de Proyectos

Tipos de Evaluación Participativa

Cuando de evaluar un proyecto social o socio-ambiental se trata hay tres momentos importantes en que el proceso evaluatorio es pertinente: a) antes de iniciar el proyecto, b) cuando ya el proyecto está en plena ejecución, y c) cuando el proyecto ha concluido.

a) Antes que el proyecto inicie: una evaluación muy importante que da cuenta, entre otros temas de su pertinencia, acogida entre la población, potencial sostenibilidad social, económica y ambiental, es la denominada Evaluación Ex –Ante.

La evaluación ex –ante de un proyecto es, en esencia, un estudio de factibilidad que nos posibilita el determinar técnicamente si el proyecto que se quiere emprender cumple con los requisitos básicos que lo convertirían en una alternativa social viable a una problemática o necesidad social importante identificada participativamente por los potenciales beneficiarios.

b) A medio camino: se la realiza, generalmente, cuando el proyecto va por la mitad de tiempo de su ejecución programada para identificar su nivel de avance en relación a la programación, los resultados parciales alcanzados, grado de participación e involucramiento de los beneficiarios, etc. lo cual posibilitará identificar ajustes necesarios para fortalecer el proyecto o redireccionarlo.

La Evaluación de Medio Término o “Evaluación Durante”, como la denominan algunos, es en la práctica una evaluación de proceso muy necesaria, ya que se realiza cuando todavía tenemos tiempo de realizar cambios, fortalecer procesos e inclusive, si el proyecto “ya no tiene remedio” -por problemas insolubles- detener su ejecución…

c) Al final del proyecto: este tipo de evaluación es conocida también como Evaluación Ex –post y tiene como objetivo definir, principalmente, el nivel de pertinencia de un proyecto, su eficacia, eficiencia, impacto, objetivos alcanzados, grado de cumplimiento de actividades programadas, logros y limitaciones, lecciones aprendidas, y recomendaciones para futuros procesos. Constituye un requisito imprescindible para el financiamiento de un proyecto por parte de las agencias de cooperación internacional y tiene que ser incluida en el documento proyecto.

Vale recordar que, sea cual fuere el tipo de evaluación participativa que se implemente durante el desarrollo de un proyecto social o socio-ambiental o al final de su proceso, ésta siempre buscará recoger las visiones de todos quienes participan o participaron en su implementación, con la finalidad de obtener apreciaciones y percepciones de todos los actores, ya que se parte de la convicción que quienes se involucran en el proyecto son los que mejor lo conocen y pueden aportar criterios con autoridad, lo que posibilitará una valoración más objetiva, realista y democrática del proceso.

Próxima entrega: Tips de Evaluación Ex -Ante

Principales actores de una evaluación participativa

- La luna desde mi ventana a las 6 pm. (Foto: H.Medina) -

¿Qué tiene que ver una foto de la Luna tomada por mí, a las 18:00h, con una cámara digital Canon Powershot SX1 IS, zoom 20x, en Quito-Ecuador, con un proceso de evaluación de proyectos sociales?. Aparentemente nada… verdad?

Sin embargo, lo que quiero señalar ahora es que ésta foto, tomada para evaluar qué tan veraces eran las características que la compañía Canon presentaba de este modelo de cámara digital en su página web, es sólo un ejemplo de lo que hacemos todos en nuestra vida cotidiana, prácticamente todos los días. Evaluamos, valoramos, sopesamos… si la decisión que vamos a tomar respecto de una compra, un viaje, un servicio a contratar, un empleo a abandonar o un empleo a postular, etc. es la correcta o no, por su conveniencia para nuestro estilo de vida, por sus ventajas y desventajas, por sus potencialidades, en fin…

Eso en definitiva es una evaluación, una valoración. Y una valoración que nos induce a tomar una decisión determinada: comprar o no comprar ese producto, elegir otro, sostenerse en el actual trabajo o postular al otro, viajar de vacaciones a tal lugar y no al otro. Esta decisión, basada en el análisis de algunos elementos consciente o inconscientemente intenta ser objetiva, realista, práctica.

En el caso de la evaluación de un proyecto social o socio-ambiental, ésta también constituye una valoración con respecto a su pertinencia social, económica y/o cultural, su eficacia y eficiencia, impacto, niveles de consecución de objetivos, lecciones aprendidas, y recomendaciones para futuros proyectos, entre sus principales temas.

La evaluación participativa de un proyecto social o socio-ambiental tiene por objeto recoger las visiones de todos quienes participaron, de una u otra manera, en su implementación, con la finalidad de obtener apreciaciones y percepciones de todos los actores, partiendo de la concepción que quienes están involucrados en su proceso son los que mejor lo conocen y pueden aportar criterios con autoridad, lo que posibilitará una valoración más objetiva, realista y democrática del proceso.

En esta dirección, incluye la participación activa de los actores sociales que han intervenido en la formulación, ejecución y seguimiento del proceso, es decir durante todo el ciclo de vida del proyecto, a nivel de provisión de información, criterios técnicos, percepciones sociales respecto de éste, valoraciones, sugerencias para fortalecerlo (cuando se trata de una evaluación de proceso o evaluación intermedia) o para aplicarse en una siguiente fase de ejecución.

Los principales actores de una evaluación participativa proyectos sociales o socio-ambientales, y que tienen roles diferenciados en el proceso, son: la institución u organización que formuló el proyecto (generalmente la que lo ejecuta), institución u organización patrocinadora (la que lo financia), equipo técnico ejecutor del proyecto, organización social (campesina, urbana, indígena, etc.) contraparte de la institución u organización ejecutora, y los beneficiarios directos del proyecto.

A continuación, los roles que pueden desempeñar estos actores sociales en la evaluación participativa de un proyecto:

·      Institución patrocinadora del proyecto: generalmente no interviene directamente, pero puede haber financiado la evaluación. A ésta institución u organización remitirá el informe final aprobado la organización ejecutora.

·      Institución u organización ejecutora del proyecto: provee información documental (información secundaria) entre la que se cuenta: documento proyecto, informes de seguimiento, informes de evaluación intermedia (cuando los hay), información de contacto para trabajo de campo. Si es la contratante, puede proveer de movilización en campo.

·      Equipo ejecutor: provee información técnica relevante sobre el proceso de ejecución del proyecto, sirve de conexión con la organización social contraparte del proyecto y beneficiarios. Es importante su visión respecto del proyecto, pues sus integrantes han estado involucrados directamente en su implementación.

·      Organización contraparte: provee información clave sobre el contexto en el que se implementa el proyecto y sus participantes; constituye el nexo más directo con los beneficiarios. Su involucramiento en la evaluación es indispensable, a través de dirigentes con credibilidad.

·      Beneficiarios directos: la percepción y valoración de los beneficiarios sobre el proyecto, en cuanto a su pertinencia, objetivos, logros y limitaciones, participación social, lecciones aprendidas, y sugerencias, son importantísimas para conocer lo que el proyecto representa para la población objetivo.

Próxima entrega: Tipos de Evaluación de Proyectos Sociales

Tips para Evaluación de Proyectos Sociales (I)

 

Uno de los campos más interesantes y demandados en consultoría social freelance es el de evaluación de proyectos. Y, la verdad sea dicha, creo que sobre este tema he realizado la mayor parte o al menos un 50% de mis consultorías en Ecuador.

La primera vez que en una ONG me pidieron que realizara la evaluación de un proyecto estaba un tanto preocupado pues, francamente, no tenía una idea muy concreta de la metodología y herramientas de investigación-evaluación a utilizar. Así que, el primer paso acertado que di fue revisar un texto sobre evaluación de proyectos sociales, editado por alguna agencia de cooperación para el desarrollo internacional, que me dio “luces” sobre lo que significaba, para que servía este proceso, y alguna referencia (listado) de herramientas que a las que se podía recurrir, para hacer de la evaluación algo técnico y objetivo.

Algo que siempre recuerdo del texto mencionado es que señalaba algunos pretextos que esgrimen algunas organizaciones que ejecutan proyectos sociales para que no su implementación no sea evaluada. Algunos se dicen, o decían abiertamente, sobre todo en los años setenta, y otros sólo se mencionaban “dentro de casa”… 

He aquí algunos de ellos:

•    No tenemos tiempo y estamos muy ocupados como para realizar una evaluación.
•    Nosotros mismo podemos hacerlo, y no hace falta una evaluación externa.
•    Un consultor externo no conoce nuestra organización y nuestro proceso, y mal puede evaluarnos.
•    Es un proceso que demanda recursos económicos que no disponemos.
•    Ya lo hemos hecho periódicamente a nivel institucional y no hace falta invertir tiempo y dinero en evaluaciones externas.

La verdad que subyace en la mayoría de estas afirmaciones es el temor a ser evaluados, en gran medida porque la concepción tradicional de la evaluación es que es algo similar a una auditoria que puede arrojar resultados negativos en perjuicio de la institución u organización. Está claro que no hay nada más lejano a la realidad, porque el proceso evaluatorio no es una auditoria para descubrir ineficiencias o malos manejos económicos que podrían ser sancionados.

Y bueno, felizmente este prejuicio se ha ido disipando progresivamente a partir de que el seguimiento y la evaluación constituyen un componente obligado de la planificación y gestión de un proyecto, exigido por los auspiciantes nacionales e internacionales.

La evaluación constituye, en términos generales, un proceso participativo conducente a identificar la pertinencia, eficiencia y eficacia de un proyecto en relación a sus objetivos, resultados y actividades programados, en el afán de fortalecerlo o realizar ajustes (si es una evaluación intermedia) o de hacer un balance de su ejecución y definir lecciones aprendidas que pueden ser valiosas para la implementación de futuros procesos.

Próxima entrega: Tips para evaluación participativa de proyectos sociales (II).