2015-Año internacional de la Evaluación – ¡ Cualquier tiempo pasado fue peor ¡


Son pocos los profesionales de la evaluación que a estas alturas no saben de la importancia del año 2015  –desde hace un año viene como un murmullo que ya se transforma en realidad, he aquí nuestro AÑO INTERNACIONAL DE LA EVALUACION ¡¡¡

Empieza el 2015 y dejamos atrás este año que comenzó un poco torcido…pero en el que también mis hijos menores ya tienen un año, he plantado árboles, he escrito tres publicaciones,- una sobre el uso de evaluaciones, otra sobre la gestión del conocimiento de las evaluaciones y la tercera sobre evaluación cualitativa-, he participado en el Congreso de la EES de Dublín y comenzado 6 evaluaciones…algunas con alegrías y otras con penas, como suele y puede pasar en la evaluación independiente.

Hemos de ver con mucha ilusión este año internacional de la evaluación y comienzo de la agenda post 2015 ¡¡¡

Sí, todos los que nos dedicamos a esto de la evaluación, 1. Como fuente primaria o secundaria de ingresos o 2. Como pasatiempo –sí conozco a alguno,¡¡ qué fuerte ¡¡, sí pero qué suerte también ¡ -, o 3. Como una forma de entender el mundo o a nosotr@s mism@s o, l@s más ambicios@s… 4. Para cambiar el mundo o para que el mundo no nos cambie tanto…o, 5. Como una mezcla de todos ellos, TODOS, hemos de ver con mucha ilusión este año internacional de la evaluación y comienzo del post 2015 ¡¡¡

Esperemos lo mejor de este año 2015…

Un año que acelere la mejor distribución de la riqueza, el desarrollo justo y sostenible y el cumplimiento de los derechos humanos.

Un año en que se aprenda más de los errores que de los aciertos.

Un año para escuchar las voces de las personas que normalmente no son escuchadas

Un año que reduzca la retórica y aumente la acción reflexión

Un año que reduzca la violencia de género, la violencia contra las mujeres y aumente la equidad entre mujeres y hombres.

Un año en el que los Objetivos de Desarrollo sean un medio apropiado para ello

Un año que nos haga mejores profesionales y mejores ciudadanos, mejores técnicos, mejores gestores, mejores políticos…pero sobre todo mejores personas, mejores padres, mejores madres, mejores socios…

Ojalá la evaluación que, como dicen, es una actividad de todos los días, nos ayude a mejorar…Y por supuesto un año para aprender a aprender para el desarrollo personal, comunitario, colectivo, social…institucional…porque hay tanto que aprender y de lo que aprender…para ser mejores ciudadanos, comunidades, colectivos, sociedades…instituciones.

Espero que mi primer gran evento evaluativo en 2015 será en Perú. Reciéntemente ha terminado el plazo para inscribirse en el primer gran evento, el Congreso de la RELAC ¡ …si todo va bien al menos participaré en alguna ponencia y panel.

Son momentos de recordar el 2014, yo no suelo ser dado a ver esos programas  revisionistas, pero aquí traigo dos referencias interesantes para hacer el cierre del año.

PRIMERA. Aquí hago una traducción libre de la carta que  Michele Tarsilla, experto en desarrollo de capacidades en evaluación de forma transformativa,  ha enviado a Santa Claus, y al tiempo aprovecho para reflexionar sobre sus reflexiones…porque no hemos de reinventar la rueda…

  1. Propuestas de evaluaciones publicadas al menos 3 semanas antes de la fecha límite, para poder enviar estrategias de evaluación creíbles…acabo de recibir una oferta que me daba 2 días, en ocasiones he recibido ofertas que ya habían acabado su plazo…
  2. Menos ambigüedad en el lenguaje utilizado durante las interacciones con clientes y socios y en los informes de evaluación…bueno qué decir a estas alturas de nuestro argot tan peculiar en cooperación, y si añadimos el de los freakies de la evaluación
  3. Más desarrollo de capacidades con oportunidad de ponerlas en práctica para jóvenes profesionales de la evaluación
  4. Más voces contribuyendo a la agenda global de evaluación –las asocaiciones de evaluación internacional son buenas en tanto que no desincentivan un pluralismo genuino de voces locales y de opiniones de cómo aumentar la capacidad a varios niveles…un peligro de la globalización, si al final no sirve para enriquecer el discurso sino lo contrario, para mimetizar un discurso único…
  5. Sabiendo que es diferente en cada zona, más gente definiendo el concepto de capacidades en evaluación, para poder medir mejor este constructo
  6. Más modelos lógicos y teorías del cambio capturando una más amplia pluralidad de perspectivas sobre cómo los programas deberían trabajar y/o cómo podrían fallar.
  7. Más planificadores, ejecutores y evaluadores piensan sobre cómo prevenir y dirigir resultados no esperados en su trabajo
  8. Más creatividad e intencionalidad en sus métodos mixtos cuantitativos y cualitativos
  9. Que los nuevos objetivos de desarrollo sostenible de la agenda post 2015 no distraigan demasiado la atención del seguimiento de los resultados de desarrollo identificados por los propios países en respuesta sus necesidades específicas – no necesariamente globales – expresadas por sus respectivos ciudadanos
  10. Menos gente refiriéndose a la dicotomía Norte-Sur o Países desarrollados y no desarrollos, debido a que el mundo está formado por individuos, personas independientemente de sus títulos, poder, ingresos y localización.
  11. Más evaluadores locales contribuyendo al trabajo en equipo en evaluación, no sólo durante la fase de recolección de información sino también durante la fase de gabinete y el análisis.
  12. Más blogs y literatura especializada en otros lenguajes diferentes que el inglés.

SEGUNDA. Inspirado por a la lista de 15 “Dolencias de la Curia” del discurso de Navidad del papa Francisco, Chris Roche, ex jefe de evaluación de Oxfam GB y hasta hace poco jefe de Oxfam Australia, ha recopilado las siguientes 15 Dolencias del Sector de Desarrollo

1) Sentimiento de inmortalidad, inmunidad o indispensabilidad. Una organización o institución que no hace autocrítica, que no se actualiza, que no busca mejorarse, es un cuerpo enfermo.”

2) Tomarse uno mismo demasiado en serio. Tomarse la vida con humor es importante y un arma de los débiles”

3) Endurecerse espiritual y mentalmente. “Es peligroso perder la sensibilidad humana que nos permite llorar con los que sufren, y celebrar con los que están haciendo el cambio.”

4) Demasiada planificación “Es necesario preparar bien las cosas, pero no se ha de caer en la tentación de tratar de cerrar o dirigir la libertad de los activistas o profesionales de primera línea, que son más flexibles y adaptables que cualquier plan estratégico. Esto puede resultar en el trastorno obsesivo de la medición”.

5) Trabajar sin coordinación, colaboración y asociación como una orquesta que produce ruido. “Cuando la oficina de campo indica a la oficina central, ‘No te necesito’ o la oficina central le indica a la oficina de campo ‘yo estoy a cargo.'”

6) Tener el ‘Alzheimer del desarrollo. “Lo vemos en las personas que han olvidado su encuentro con los pobres…en aquellos que dependen completamente de su aquí y ahora, en sus pasiones, las modas de desarrollo y manías, en los que construir muros alrededor de sí mismos y convertirse en esclavos de las mejores prácticas o blueprints- en contraposición al ‘buen ajuste’ construido con nuestras propias manos ”

7) Ser rivales. “Cuando la apariencia, el color de nuestra marca y el tamaño de nuestros ingresos personales se convierten en los objetivos primordiales de nuestra vida, y la colaboración es algo secundario.”

8) El sufrimiento por ‘esquizofrenia existencial. “Es la enfermedad de los que viven una doble vida, fruto de la hipocresía que es típica de la vacuidad mediocre y progresiva que los marcos lógicos no pueden llenar. Es una enfermedad que suele afectar a las personas que, abandonando la práctica del desarrollo y el activismo, se limitan a tareas burocráticas, perdiendo contacto con la realidad y las personas concretas”.

9) Cometer el “terrorismo de los sarcásticos” “Es la enfermedad de las personas que no tienen el valor de hablar directamente, hablando a espaldas de la gente o en Twitter o blogs.”

10) Glorificar a jefes y los donantes. “Es la enfermedad de los que cortejan a sus superiores, y a los donantes, con la esperanza de su benevolente recompensa. Son víctimas de arribismo y el oportunismo, honran a las personas que son poderosas y hacen caso omiso de las que no lo son”.

11) Ser indiferente a las otras personas. “Cuando, por celos o por competencia se encuentra gozo en ver otra caída en lugar de ayudar y animar.”

12) Tener un “rostro cínico.” “En realidad, la gravedad de la impostura y del cinismo estéril son a menudo síntomas del miedo y la inseguridad. El activista debe ser sereno, entusiasta y transmitir un sentido de la justicia y la positividad dondequiera que vaya”.

13) Querer más y más. “Cuando la organización intenta llenar un vacío existencial por la acumulación de ingresos y renta, no porque se necesite, sino porque se sentirá más seguro organizativamente.”

14) La formación de “círculos y camarillas cerradas” que tratan de ser más fuertes que el todo. “Esta enfermedad comienza siempre con buenas intenciones, pero conforme pasa el tiempo, se esclaviza a sus miembros al convertirse en un cáncer que amenaza la armonía del sector y causa tanta competencia malsana.”

15) La ambición del beneficio constante- “Es la enfermedad de los que insaciablemente tratan de multiplicar su poder y para ello son capaces de la calumnia, la difamación y de desacreditar a los demás, incluso en periódicos y revistas y en particular en línea, naturalmente, para mostrarse como más capaces que otros marcando la diferencia “.

Bueno compañeras, compañeros, necesitamos de todo nuestro arte para seguir haciendo cambiar las cosas…mi arte en este año que viene se lo dedico a ese gran artista que hace casi un año nos dejó.

 

¡¡¡ Feliz año 2015 internacional de la evaluación ¡¡¡

 

Soluciones diferentes pero iguales. Un nuevo manifiesto para hacer cooperación y desarrollo de forma diferente


Después de una reunión de dos días en octubre de 2014 de algunos de los más sesudos pensadores y practicantes de la cooperación y el desarrollo-no, yo no pude ir lo siento -, se ha desarrollado un manifiesto en el que se propone hacer cooperación de forma diferente. Es tiempo de repensar cómo hacemos desarrollo. Dado que por una vez no es un documento largo, he traducido abajo el manifiesto.

El manifiesto es el resultado de un taller que ahora está disponible en el sitio web de ODI, y en el de Harvard. Y en fin, este proceso ya tiene su propia página web, donde se puede seguir firmando el manifiesto.

Este manifiesto ha tenido mucha acogida en medios anglosajones- casi todos los asistentes anglófonos por cierto…¡¡qué raro ¡¡. Aquí un ejemplo del Foreign Policy y una reflexión de Duncan Green con su feedback de los dos días que pasaron en Harvard para dar lugar a ese manifiesto. Los colegas de la red de gestión del conocimiento para el desarrollo –Knowledge management for development- KM4Dev, han tenido también una discusión sobre el tema. Por último aquí hay una interesante reflexión de Craig Valters que une teorías del cambio y este manifiesto-¿Pueden las teorías del cambio ayudarnos a hacer las cosas de forma diferente?

Creo que a veces nos sobra pensamiento y nos falta contrastarlo con lo que hacemos en la realidad. Desde mi etapa como oficial de la división de evaluación de la Cooperación Española-MAEC, cada vez que se mencionan cambios de paradigma en la cooperación y el desarrollo me empiezo a preguntar… en base a qué evidencias se realizan los cambios de paradigma, porque se dedica demasiado tiempo a diseñar nuevos esquemas pero muy poco a reflexionar sobre por qué los anteriores no sirvieron y por qué los nuevos van a ser el santo grial, el bálsamo de fierabrás, la magic bullet…en tantas ocasiones tengo la impresión de que lo que se propone es vino nuevo en odres viejos…como lo comenta Arnaldo Pellini en su post ¿Haciendo desarrollo de forma diferente: misión imposible?, en el que indica: “Estoy de acuerdo con estas ideas,…,pero ¿qué diferencia podemos tener si debido a la cultura de la organización, la historia, las circunstancias y tradiciones, los sistemas de nuestro entorno tienen grandes dificultades para abrazar la flexibilidad, la incertidumbre, experimentación no probada y los cambios incrementales lentos?

No deja de sorprenderme cómo a nivel internacional se cambia de paradigma, pero en pocos casos se tienen en cuenta evidencias desde evaluaciones u otras fuentes o voces desde el terreno…Se cambia, de uno a otro, siempre alguien queriendo poner su pequeña pica en Flandes, poniendo nombres diferentes a presuntas novedades, para que quede claro que ahora va en serio, que lo de ahora es diferente, un cambio radical…como si el desarrollo no fuese un proceso incremental. Y cuando se quiere hacer una ruptura se corre el riesgo de un movimiento pendular o acordeón…ejemplo lo tenemos en el efecto tan desastroso para muchos actores de la Cooperación Española de la subida y reducción ambas súbitas del presupuesto para AOD, en fin ONGD históricas en suspensión de pagos

Por cierto Duncan Green nos da pistas sobre cuál de los cientos de documentos alrededor de la agenda post 2015 merece la pena leer. De hecho Duncan dice que si tenemos que leer un solo paper, leamos éste de aquí.

…Y he firmado el manifiesto, porque merece la pena…

********************************************************************

Aquí mi propia traducción al castellano del Manifiesto

 

Declaración del 10 de 2014 del taller ‘Hacer Desarrollo de forma Diferente’

Demasiadas iniciativas de desarrollo tienen un impacto limitado. Las escuelas se construyen, pero los niños no aprenden. Las clínicas se construyen pero la enfermedad persiste. Los gobiernos adoptan reformas pero con demasiado pequeños cambios para sus ciudadanos.

Esto se debe a que el verdadero progreso en desarrollo es complejo: las soluciones no son simples o evidentes, los que se beneficiarían la mayoría carecen de poder, los que pueden hacer la diferencia se desenganchan y las barreras políticas se pasan por alto. Muchas iniciativas de desarrollo no tienen en cuenta esta complejidad, la promoción de intervenciones irrelevantes que tendrán poco impacto.

Algunas iniciativas de desarrollo, sin embargo, tienen resultados reales. Algunos son impulsados a nivel nacional, mientras que otros reciben apoyo externo. Por lo general, involucran muchos actores – gobiernos, la sociedad civil, organismos internacionales y el sector privado – que trabajan juntos para ofrecer avances reales en situaciones complejas y a pesar de una fuerte resistencia. En la práctica, las iniciativas exitosas reflejan principios comunes.

– Se basan en resolver los problemas locales que se debaten, son definidos y refinados por la población local en un proceso continuo.

-Están legitimados a todos los niveles (políticos, empresariales y sociales), la construcción de la propiedad y el impulso en todo el proceso que hay que “apropiación local” en la realidad (no sólo en el papel).

-Se trabaja a través de los coordinadores locales que se movilizan todos los que tienen una participación en el progreso (en ambas coaliciones y equipos formales e informales) para hacer frente a los problemas comunes e introducir cambios relevantes.

– Combinan el diseño y la implementación a través de ciclos rápidos de planificación, acción, reflexión y revisión (aprovechando los conocimientos locales, la retroalimentación y la energía) para fomentar el aprendizaje de los éxitos y fracasos.

-Gestionan los riesgos al hacer “pequeñas apuestas”: actividades que persiguen con la promesa y dejar caer los demás.

-Fomentan resultados reales – soluciones reales a problemas reales que tienen un impacto real: que construyen confianza, empoderan a las personas y promueven la sostenibilidad.

Como una comunidad emergente de profesionales del desarrollo y los observadores, creemos que las iniciativas de desarrollo pueden – y deben – tener un mayor impacto.

Nos comprometemos a aplicar estos principios en nuestros propios esfuerzos para llevar a cabo, promover y facilitar el progreso del desarrollo, para documentar los nuevos enfoques, para explicar sus implicaciones prácticas y favorecer su perfeccionamiento y la adopción más amplia.

Queremos ampliar nuestra comunidad para incluir a aquellos que ya están trabajando en este camino.

Hacemos un llamamiento a las organizaciones internacionales para el desarrollo de todo tipo para abrazar estos principios como la mejor manera de abordar los desafíos complejos e impacto de desarrollo. Reconocemos las dificultades, pero creemos que las estrategias y enfoques más eficaces pueden generar mayor impacto y sostenibilidad.

Discutiendo sobre resultados: las implicaciones políticas de los enfoques basados en evidencias


Esta semana amparada por el blog del conocido (por su libro From Powerty to Power) blogero de Oxfam Gran Breataña (OGB) Duncan Green (antiguo director de investigación de OGB), se ha dado pie para continuar la discusión sobre la agenda de resultados (discusión no en el sentido español, sino en el sentido nórdico, sin acritud, como cuando la crítica de la razón pura kantiana, que tampoco es crítica a la española vamos)

Y es que desde la llegada de los conservadores al gobierno en el Reino Unido se han puesto a pedir insistentemente su “Value for Money”. Últimamente son especialmente insistentes con los organismos multilaterales, al contrario que el Gobierno de España que practicaba el “Money for Nothing” (bueno “nothing” aparte de mandar a alguno /a de mis chico/as a Nueva York o Washington, “porque yo lo valgo claro”). Y este mantra del “Value for Nothing”, no digo que esté bien, pero es mejor que no tener nada…y es que aunque me parezca muy ambicioso medir la complejidad, al final del día algo medirán (digo yo). Y es que estos británicos cuando se ponen se ponen…

Y andan muchos por allá en la Pérfida Albión revueltos, hasta los más díscolos andan afilando sus lápices para esgrimir sus argumentos. Es curioso conocer otras culturas o países donde no se te transforme en un paria, no se te haga un juicio moral, por el hecho de tener otra ideología u otra opinión.

Sigamos con la discusión del Blog de Duncan: Ha habido tres asaltos, dos de ellos protagonizados por Rosalind Eyben y Chris Roche. Ambos muy conocidos, la primera investigadora del IDS (y ex del DFID) y el segundo director de Oxfam Australia (Ex jefe de Evaluación del OGB).  Aquí la primera y segunda entrega de Rosalyn y Chris.

El otro asalto ha sido protagonizado por dos científicos que trabajan para el DFID (Agencia de Cooperación británica): Chris Whitty, Director de Investigación y Evidencia y Asesor científico y  Stefan Dercon, Jefe Economista del DFID. Aquí podéis encontrar su posición.

Da gusto cómo se ha caldeado el ambiente: los comentarios a los posts parecen posts y los comentaristas en uno u otro foro son gente de la talla de Paul Harvey, Enrique Mendizábal, Zenda Offir y Stephen Jones

Pues hasta aquí la introducción, la próxima semana más ¿ no pretenderían que les diese la presentación, el nudo y desenlace en mi micropost de la semana no?

Nuevo curso (evaluador)


El año escolar comienza. Aquí algunas interesantes ofertas, revisiones, lecturas de 2012 para llenar los huecos de vuestra agenda:

Una interesante revisión sobre la Teoría del Cambio y su uso en Cooperación Internacional

Una revisión que amplía las posibilidades de la Evaluación de Impacto Eliot Stern coordina y ha participado Rick Davies

Otro informe del gran Howard White que trata de dar un marco integrador de diferentes enfoques (¡algunos cualitativos ¡) en evaluación de impacto.

Y referencias circulares, aquí os dejo otra recientísima publicación sobre la política de evaluación y la evaluación de políticas, coautor Chris Roche.

Hasta pronto