Evaluación y visualización de datos


 

Visualización de datos

Visualización de datos

Esta vez toca hablar de la visualización de datos, aprovecho la publicación que hice con Rafa Monterde (el creador de la Evaluateca): Estrategias cualitativas de evaluación en la Cooperación para el Desarrollo: viejos debates y nuevos retos (Rodríguez Ariza & Monterde, 2014) en la que dedicamos un apartado a la Evaluación y la visualización de datos.

Visualización de datos

Visualización de datos

Y por qué no decirlo, este es un submundo dentro del mundo de la evaluación, en la que tenemos a grandes figuras. Entre todas las estrellas de la visualización empecemos por Sara Vaca. En su página web Visual Brains muestra parte de su creatividad. Una pena que no dedique más de su arte a su lengua materna i

Visualización sobre lo que es y no es evaluación

Visualización sobre lo que es y no es evaluación

 

Visualización sobre sistemas rígidos o flexibles

Visualización sobre sistemas rígidos o flexibles

 

Visualización sobre el grado de participación en el proceso evaluativo

Visualización sobre el grado de participación en el proceso evaluativo

También podemos citar a Stephanie Evergreen y Ann K Emery como pioneras desde la American Evaluation Association de todo lo relativo a visualización de datos.

Checklist de la visualización de datos

Checklist de la visualización de datos

Stephanie es una referencia en visualización, ha publicado recientemente el libro Presenting Data Effectively y podemos encontrar más en su página web Evergreen Data

Ann Emery también publica sus visualizaciones en su página AnnkEmery, muy creativa, accesible y comprende el castellano (i), la conocí a través de EvalCentral (cuando todavía existía EvalCentral claro, gracias Chris Lysy por darnos y quitarnos esa oportunidad como un visionario y dios de la visualización que eres).

La visualización de datos es cada vez más una competencia clave para los evaluadores. La evaluación cualitativa está incorporando rápidamente una gran variedad de técnicas y herramientas de visualización de datos. Aunque parezca nuevo, esta temática ha sido de interés para el campo de la evaluación durante una década y media. Una buena muestra de ello podemos encontrarla en la publicación de 2013 de dos títulos monográficos de la revista de la Asociación Americana de Evaluación ”New Directions for Evaluation” (Dos números de New Directions of Evaluations se dedican a Data Visualization (Números 139 y 140, otoño e invierno de 2013) y la reciente creación de un Grupo de Interés (2013) sobre la visualización de datos en este colectivo, referencia internacional de las redes profesionales de evaluación.

Revista de la AEA sobre Visualización de Datos

Revista de la AEA sobre Visualización de Datos

Dado este interés y los continuos avances tanto en software de visualización, potencia de procesamiento y capacidad de almacenamiento, la visualización de datos se ha convertido en un potencial valor añadido para la comunidad de evaluación que permite mejorar la forma en que diseña, analiza y comunica la información.

La visualización de datos es el proceso de representación gráfica de los datos con el fin de identificar tendencias y patrones que de otra manera serían confusos o difíciles de analizar. La visualización de datos sirve para varios propósitos, desde la previa comprensión de los datos disponibles hasta su análisis y muy especialmente la comunicación a un una amplia gama de grupos de interés.

La elección de qué tipo de gráfica o visualización utilizar depende en gran medida de la naturaleza de las variables que se tenga: variables relacionales, comparativas, basadas en el tiempo, etc. Según Kosara (2007 en Azzam et al (2013)), La visualización de datos puede ser definida según tres criterios:

1) Es un proceso que se apoya indistintamente en datos cualitativos o cuantitativos

2) Los resultados son una imagen representativa de los datos en bruto

3) La representación es entendible por las destinatarios

El producto final es compatible con la exploración, el examen, y la comunicación de los datos. Aunque estos criterios pueden parecer evidentes, en la práctica se necesita una consideración cuidadosa y su aplicación sistemática para alcanzarlos.

El primer criterio, basado en datos cualitativos o cuantitativos, es el más sencillo de lograr, porque durante una evaluación a menudo reunimos varias formas de datos que pueden potencialmente ser visualizados. Se mantiene el criterio amplio de datos porque los datos cuantitativos y cualitativos pueden tomar muchas características y atributos. Los datos cuantitativos pueden incluir elementos de coordenadas geográficas, la codificación cuantificada, diversas características demográficas, y otra serie de valores en base numérica. Los datos cualitativos también pueden tomar la forma de entrevistas transcritas, conversaciones grabadas, imágenes, vídeo, o dibujos a partir de eventos, procesos y resultados. Cada uno de estos tipos de datos requiere de enfoques únicos y métodos de visualización para optimizar el conocimiento que contienen.

El segundo criterio es un recordatorio para examinar los datos con cuidado, de forma que podamos asegurar que la amplitud y el alcance de la visualización no omite información importante, no sobrerepresenta ciertos datos, y que la visualización refleja con precisión la información contenida en los mismos. Tener este conocimiento en mente durante todo el proceso de desarrollo de la visualización puede ayudar a priorizar los elementos de diseño de visualización, de manera que su mensaje refleje lo que en realidad está en los datos. Este criterio es también un recordatorio importante para poder trazar una anipulación intencionada de la visualización que puede dar lugar a malentendidos.

Finalmente, en relación a la legibilidad, que ayuda en la exploración, el examen, y la comunicación, pueden utilizarse varios métodos, que varían en alcance y propósito. Todos requieren que el evaluador considere la audiencia para elaborar una visualización que debe ser atractiva y clarificadora. Lograr este objetivo es importante para convertir los datos en conocimiento.

Usos Actuales de Visualización de Datos en Evaluación

Las etapas iniciales del diseño de una evaluación, tienen que ver con la comprensión y obtención de puntos de vista sobre el objeto evaluado, su historia, las actividades, las partes interesadas y, en general el contexto en el cual opera el programa. Cuando se recopila esta información se pueden utilizar técnicas de visualización cualitativas, tales como el registro gráfico (una forma flexible de desarrollo de la teoría del programa, contando la historia del programa, de dónde viene, dónde está y a dónde va) o modelos conceptuales interactivos (permiten al evaluador crear múltiples niveles para comprender la intervención desde lo más general a lo más detallado), para obtener información de una manera visual interactiva que fomenta la discusión entre las partes interesadas (Azzam, Evergreen, Germuth, & Kistler, 2013, pág. 14).

Por otra parte, el diseño de las herramientas visuales de recolección de datos y el uso de métodos de recopilación que faciliten la visualización contribuyen significativamente a mejorar la calidad de la información que recopilamos.

Las consideraciones de diseño gráfico con aspectos como la posición, el espacio en blanco, simetría, influyen en la recopilación de datos en las encuesta. Elementos importantes en las encuestas son, por ejemplo:

(a) el espaciamiento desigual entre las opciones de respuesta hacía que se destacase de los demás;

(b) los grandes cuadros de texto para respuestas abiertas que conducen a respuestas más largas y generaron más temas durante el análisis.

Utilización de visualización en encuestas

Utilización de visualización en encuestas

Con frecuencia, la información recopilada en la evaluación a partir de muchas fuentes (Fuentes como encuestas, entrevistas, grupos de discusión, bases de datos, imágenes, videos…), se reduce a un solo valor numérico, tal como una puntuación media, o a fragmentos de frases que se utilizan para transmitir conclusiones acerca de la efectividad de un programa. Durante la etapa de análisis de la evaluación se necesita tener acceso a los detalles visuales, conectar diferentes tipos de información, identificar las desviaciones interesantes y patrones, y explorar la información desde múltiples perspectivas o niveles. Haciendo esto se mejora la trazabilidad y coherencia de los datos, incluyendo sus fortalezas y limitaciones, y permite que el evaluador detectar valores atípicos que pueden advertir de inconsistencias en cómo se introdujeron o apuntar a efectos inesperados del programa en un situaciones particulares.

Sin embargo, la función más extendida de la visualización es, sin duda, la comunicación, donde la juega un papel crítico en la difusión de los resultados de la evaluación. Por medio de la visualización de datos podemos involucrar a los participantes del programa aumentando así también su capacidad de entender los datos y participar en el proceso de evaluación. Mapas colaborativos, modelos lógicos y representaciones gráficas pueden facilitar la comprensión de los resultados y sus implicaciones al describir las actividades de un programa de una manera concisa y clara.

Las visualizaciones interactivas bien diseñadas para información y participación de la comunidad ayudan a que los interesados respondan a preguntas y ayuden a la definición de las variables y la interpretación de los resultados.

Además de la tradicional presentación de informes, donde la visualización de datos es de forma narrativa, están empezando a surgir nuevos métodos, como la infografía o los comics. Aquí podemos citar también Chirs Lysy y su freshspectrum

Comic de Chris Lysy

Comic de Chris Lysy

Otro ejemplo, los nuevos enfoques han llevado a la visualización de diagramas de bucle causal como una forma de representar la retroalimentación en los sistemas complejos.

Bucles causales para comprender un sistema agrario complejo

Bucles causales para comprender un sistema agrario complejo

Tendencias futuras

El desarrollo de la visualización de datos ha experimentado un crecimiento exponencial en los últimos años. Esto se debe por un lado al aumento del interés e influencia de las tecnologías de la información sobre nuestras vidas y cultura, y por otro a la mayor disponibilidad de fuentes en línea para datos y visualización, así como en parte debido también a una mayor interactividad que ha surgido a través de la generalización de dispositivos táctiles. Como afirman Azzam y otros (op. cit.) “Esto continuará y la tendencia será hacia la participación activa de las partes interesadas en el proceso de visualización y la necesidad de que los evaluadores de facilitar ese compromiso. Probablemente las partes interesadas se irán acostumbrando a interpretar, crear e interactuar con las visualizaciones de datos”.

En el futuro, tendrán mayor relevancia las visualizaciones que tengan en cuenta múltiples puntos de vista sobre las intervenciones. Los avances en las aplicaciones de software de visualización están disponibles para el uso público y a menudo sin costo financiero. Por ejemplo, programas como ManyEyes, Tableau Public, y Gapminder ahora proporcionan servicios basados en web que permiten a los usuarios subir datos para visualizaciones personalizadas. Estas tendencias, cuando sean adoptadas por los actores implicados, es posible que obligue a ser más transparentes acerca de los datos que recolectamos, al aumentar la demanda y la validación de datos en bruto. Esta predicción acerca de la transparencia ya se está convirtiendo en una realidad en Estados Unidos, donde se ha financiado y establecido data.gov, cuyo objetivo es crear un repositorio global de datos que se puede acceder, descargar, y se analiza por cualquier ciudadano preocupado interesado en temas que van desde la salud hasta la política ambiental.

La interactividad es también parte de esta tendencia, y va a aumentar su importancia futura. Si las visualizaciones de datos están diseñados para llamar la atención, el software debe hacer uso de métodos para mantener esa atención. La capacidad de profundizar en los datos y personalizar la información parece ser el siguiente paso en la visualización de datos (capacidad de “estar a un clic de ver que los datos desagregados o desglosados”). Algunos programas de software como Tableau, Spotfire, y JMP de SAS, por ejemplo, ya lo permiten. Sin embargo, la curva de aprendizaje para la manipulación de los nuevos programas de software pueden ser muy altas y costosas. Las herramientas tendrán que encontrar un equilibrio entre la familiaridad (homogeneidad) y capacidad de personalización (heterogeneidad).

Desafíos

Los evaluadores y los usuarios finales de las visualizaciones de datos también deberían tener en cuenta lo que la visualización de datos no puede hacer. Existen varias limitaciones o precauciones a tener en cuenta:

1) La primera limitación se refiere a cuestiones relacionadas con la causalidad. Uno de los principales propósitos de la visualización de datos es ilustrar las relaciones causales. Sin embargo, las visualizaciones pueden engañarnos y llevarnos a pensar que existen relaciones causales cuando en realidad no es así. Si ver es creer, visualizar datos puede perpetuar errores o falacias a partir de estadísticas cuestionables, tales como correlaciones engañosas.

2) El segundo reto es la fiabilidad de los datos y la información. La base de cualquier visualización son los datos utilizados como base y punto de partida. Si los datos contienen valores perdidos o muestras no representativas, entonces es responsabilidad del evaluador reconocer claramente esas limitaciones a través de la utilización de notas u otros indicadores para evitar confundir a las partes interesadas. Aunque los informes narrativos pueden integrar más fácilmente advertencias, explicaciones de los niveles de confianza, y declaraciones de los niveles de significación, tal declaración de incertidumbre no es tan fácil que se dé en una visualización de datos.

3) El tercer reto está relacionado con la introducción de las visualizaciones nuevas o poco conocidas por los interesados. La mayoría de los implicados en las evaluaciones tienen poca familiaridad o habilidad con el diseño gráfico y el arte. La tecnología ha hecho la visualización más accesible para las personas sin profunda formación en arte o diseño gráfico. Sin embargo, los evaluadores han de considerar si es necesario capacitar a los directamente interesados en la interpretación de la visualización para evitar malas interpretaciones.

4) La cuarta limitación la comprensión de la conexión entre la visualización y el propósito / pregunta de evaluación.

Las evaluaciones a menudo contienen múltiples fuentes de datos y análisis, sin embargo, no todos los análisis requieren una visualización. En la selección de visualizaciones a crear, el evaluador debe tener en cuenta las principales preguntas de la evaluación y diseñar visualizaciones que puedan aportar algo y apoyar claramente la respuesta a esas preguntas. Es importante destacar la información más importante en las visualizaciones a fin de no oscurecer los resultados más relevantes de la evaluación (Azzam et al, 2013; op.cit)

Pues hasta aquí no más. Pronto será la Conferencia de la Asociación Americana de Evaluación que probablemente tocará muchos aspectos de la visualización de datos, ya que esta vez toca el tema “Evaluation+Design”. Mis mejores deseos a Sara, Ann, Stephanie, Chris y todos los apasionados de la evaluación que allá se reunirán. Que la fuerza de la visualización de datos os acompañe i

Cartel de la Conferencia Anual 2016 de la Asociación Americana de Evaluación

Cartel de la Conferencia Anual 2016 de la Asociación Americana de Evaluación

REFERENCIAS CITADAS

Azzam, T., Evergreen, S., Germuth, A. A., & Kistler, S. J. (2013). Data visualization and evaluation. En S. Evergreen, Azzam, Data visualization, part 1. New Directions for Evaluation, 139, 7–32.

Rodríguez Ariza, C. & Monterde, R, (2014) Estrategias cualitativas de evaluación en la Cooperación para el Desarrollo: viejos debates y nuevos retos. Serie CECOD de Documentos de Trabajo del Centro de Estudios de Cooperación al Desarrollo, Número 29

Congresos de evaluación: EES…¿qué estrella eres tú?


Hablemos de Congresos, que abundan en otoño, y congresos en lo nuestro, los Congresos de Evaluación. Tenemos el congreso europeo de evaluación (EES), el americano (AEA) y los congresos nacionales de evaluación (Sociedad Española de Evaluación y  Aproeval)

Un congreso internacional de evaluación puede ser una experiencia intensa y mística. Emociones, relaciones y conocimiento en estado puro y en exceso, mucho más que tu capacidad de absorción. Encuentras a esas figuras, tus referencias (morales, teóricas, metodológicas, filosóficas…),  y entonces por fin son algo más que una foto en twitter o en cualquier otro medio social (hace un tiempo diríamos algo más que la contraportada de tus libros). Ves sus presentaciones, los ves moverse, te los cruzas en los pasillos, les robas una foto, te pellizcas en la mejilla (i existen i).

Y también conoces colegas más mundanos (como tú y como yo). Y eso pasa, me ha pasado: He encontrado periódicamente en esos congresos tan lejanos a colegas que de otra manera no hubiera encontrado en España.

Hay que ser un maestro para sacarle todo el partido a un congreso. Ya dediqué un post a reflexionar sobre cómo se podría preparar bien un congreso: Preparando la Conferencia de la #RELAC2015 y disfrutando. Cómo presentarse y no morir en el intento. Un congreso puede tener múltiples objetivos y todos ellos válidos: sirve para presentar nuestros progresos, aumentar nuestro conocimiento, para hacer networking, para conocer gente, temas, enfoques, contenidos…un congreso es una herramienta ideal de gestión del conocimiento, siempre que tengas el dinero y el tiempo para ir…

Y es que un congreso tiene también un poco de festival. Un sitio donde las celebridades se pasean y se hace escuchar y se mezclan con celebridades, ante la mirada asombrada de los mundanos. Y llegados a este punto, ya es el momento de la banda sonora, pongamos aquí esta melodía de la cantante francesa Barbara Carlotti: Cannes

Juguemos al juego, ¿Quién serías tú en uno de esos festivales? ¿qué actor? ¿qué actriz? ¿qué productor o director de cine? Y es que como dice la canción “en un día en Cannes todo es posible”, ¿qué tal esta una alegoría?:

Los productores de cine serían las grandes compañías comandatarias de evaluaciones.

L@s director@s de cine podrían ser l@s gestores de evaluaciones o las unidades de evaluación

Los actores y actrices serían l@s evaluadores…

A uno le da por soñar, soñar con volar y ser una celebridad. Uno querría ser a un tiempo Woody Allen, Ricardo Darín o Antonio Banderas…por qué no Katharine Hepburn, Robert Redford, George Clooney o Audrey Hepburn. A veces quizás jugamos con el rollo más independiente o con es@s menos galácticos pero también geniales como Isabel Coixet, Robert Guédiguian, Jean Reno, Kevin Spacey, Gabriel Byrne o Harvey Keitel.

La semana pasada tuvo lugar el Congreso de la Sociedad Europea de Evaluación (EES) al que no pude ir (aunque me hubiera encantado con mis compañeras del “grupo de trabajo de profesionalización de la evaluación” presentar y discutir acerca de la experiencia piloto que se ha desarrollado VEPR y en la que he colaborado). He estado en los congresos de evaluación de la ESS en Sevilla, Berlín, Lisboa, Praga y Dublín. Los temas principales de los congresos de la EES son innovación, el uso, participación y asociación, trabajo en red, gobernanza…:

Futuros de la evaluación en Europa y más allá: Conectividad, innovación y uso. 12th Conferencia. 28-30 Septiembre 2016 Maastricht, Holanda

Haciendo uso de las evaluaciones en un mundo incrementalmente complejo. UNESCO – OECD – French Evaluation Society – European Evaluation Society. 30 Septiembre 2015. Paris, Francia

Evaluación para una sociedad equitativa: Interdependencia, asociación y participación. 11th EES Conferencia Bienal EES. 1-3 Octubre 2014 Dublín, Irlanda

Evaluación en la sociedad del trabajo en red: nuevos conceptos, nuevos retos, nuevas soluciones. 10th Conferencia Bienal EES. 1-10 Octobre 2012. Helsinki, Finland

Participación, políticos y política . 9th Conferencia Bienal EES. 06/10 2010. Praga, República Checa

Construyendo para el futuro – Evaluación en gobernanza, desarrollo y progreso. 8th Conferencia Bienal EES.01/10 2008. Lisboa, Portugal

Conexiones críticas. 7th Conferencia Bienal EES.  04/10 2006. Londres, UK

Gobernanza, Democracia y Evaluación. 6th Conferencia Bienal EES. 30/09 2004. Berlin, Alemania

Aprendizaje, teoría y evidencia. 5th Conferencia Bienal EES. Sevilla. España

Y me despido con otra canción sobre de esos festivales, también con el nombre “A Cannes”, esta vez en castellano por el genial cantante y compositor de la movida madrileña, Carlos Berlanga, en su último disco Impermeable.

“Soy un pobre cineasta más y…aunque no se vive aquí del todo mal..pero yo quiero ir a Cannes…porque mi sitio está en Cannes…”

 

Canción “A Cannes” interpretada por Carlos Berlanga.

Autor(es) de la letra – M. Jonasz

Autor(es) de la música – M. Jonasz

Letra

Soy un pobre cineasta más
de los que pueblan esta ciudad,
hasta tenemos un festival,
pero yo quiero ir a Cannes.

Un accesit por un guión
que está guardado en algún cajón,
un tercer premio de dirección,
pero yo quiero ir a Cannes …
a Cannes …
a Cannes …

Y mi sitio está en la Croisette,
mientras observo a las starlettes,
y foco fijo sobre la baguette,
porque mi sitio está en Cannes.

Y las cosas son como son,
y mis encuadres son de cartón,
y mis actores son siempre amateurs,
pero yo quiero ir a Cannes …
a Cannes …
a Cannes …

No se vive aquí del todo mal,
tenemos celebridad local
que tiene calle y un restaurant,
pero que nunca fue a Cannes.

Y las cosas son como son,
y mis encuadres son de cartón,
y mis actores son siempre amateurs,
pero yo quiero ir a Cannes …
a Cannes …
a Cannes …
a Cannes …
a Cannes …

La #RELAC2015 son personas, colegas, amigos


He visto cosas que no creeríais

Hace ya una semana que volví de la conferencia de la RELAC e iba siendo el momento de contar. Ha sido una gran experiencia, una experiencia enorme. ¿Qué más adjetivos poner? Inolvidable, entrañable, intensa y bien organizada.

Comentaba a varias personas que si lo hubiera sabido hubiera atendido otras conferencias de la RELAC….las comparaciones son odiosas, pero en esta conferencia me he sentido querido, acogido y me han hecho sentir que podía tener o ser un valor añadido…

Mi primera RELAC. Cuántas personas, colegas y amig@s ¡¡ Muchas gracias a las personas de la organización.

Mi mayor reto ha sido impartir un taller pre conferencia sobre gestión del conocimiento y evaluación. Después de estar casi 8 horas como maestro de ceremonias mezclando ponencias, discusión y trabajo colectivo, tener que pasar por otra ponencia y otros dos paneles fue un paseo…pero trataré de ello en otro post.

Estos días tengo un deber pendiente, si no lo hago ahora después costará mucho más, y es el deber de tratar de contactar y retomar el contacto con los vistos y conocidos. A algun@s les pediré sus presentaciones.

No sé por qué suelo ir a contracorriente – o sí, pero mi yo inconsciente no me lo ha chivado todavía- pocas veces contradictoriamente me siento cómodo en actividades gregarias. La ceremonia de la antorcha…confieso que me deja un poco frío…sobre todo sabiendo lo que supe después … Los símbolos tienen poder, pero también su escenificación refleja las relaciones de poder deseables, existentes o deseadas o a veces los símbolos generan confusión…lo importante son las personas, no los símbolos ni los que escenifican los símbolos…claro que a veces es difícil ir más allá…en este mundo tan dado a los mensajes telegráficos, a los destellos luminosos, al sentimiento fácil en el corto plazo, cuesta mantener el pulso a la emoción y apoyos continuos.

Sé de la importancia de la institucionalización de la evaluación, sé de la necesidad de la voluntad política. Por eso me surgía una media sonrisa cuando, al igual que en mi país, muchos ponentes se referían a la necesidad de institucionalizar la evaluación a pesar de la baja voluntad política. Recordemos que la voluntad política sin medios y oportunidades de desarrollo es mera retórica….sigo convenido que la sociedad civil es el principal medio de cambio…la educación, la formación de la sociedad es la semilla para la rendición de cuentas y la evaluación.

Hubo alguna sesión pero he echado en falta un poco más de representación de la sociedad civil en las ponencias plenarias, del rol de la sociedad civil en la evaluación, en la transparencia y en la rendición de cuentas…sobre todo tratándose de América Latina y la RELAC, una red que representa una región en el que la sociedad civil ha sido y es tan fuerte en la reivindicación de derechos y obligaciones.

AH ¡ Y encontré muchas ganas de aprender sobre gestión del conocimiento y evaluación…

Encontré personas, que eran colegas que espero pasen a ser amig@s

En el panel sobre experiencias en evaluación desde la práctica visioné la famosa escena de Blade Runner que también abre este post. Utilizaba el símil del replicante para hablar de cómo el evaluador es el que más aprende en un proceso evaluativo, aprendizaje que en muchos casos está y queda sub utilizado. Amig@s, os invito a escribir ya para que nuestras lágrimas en la lluvia formen un mar….

Preparando la Conferencia de la #RELAC2015 y disfrutando. Cómo presentarse y no morir en el intento


He estado en muchas conferencias de evaluación, especialmente de la sociedad europea de evaluación, pero este año con mucha ilusión y por primera vez asisto a la conferencia de la RELAC , esta vez en Lima. Allí voy a presentar la próxima semana un taller sobre gestión del conocimiento y evaluación, además de una ponencia sobre uso de evaluaciones. Además estaré en dos paneles, uno sobre redes de evaluación y otro sobre experiencias como evaluador independiente. Pero lo que es más importante, voy a reencontrarme con buenos amigos…estos encuentros son grandes momentos personales y profesionales para un consultor independiente…son a la vez un reto y una oportunidad…recordemos que los independientes se tienen que buscar la vida para pagarse el viaje y demás gastos…pero aun así estoy convencido de que merece la pena, desde la gestión del conocimiento y desde lo personal y social… He de confesar que la RELAC está siendo MUY BIEN organizada y el nivel de los asistentes es muy alto. Va a ser un acontecimiento en este año internacional de la evaluación. Mientras preparo la conferencia quería rápidamente compartir con vosotros algunas ideas, si asistís a ésta o a futuras conferencias-

  1. Repasad bien el programa, no dejemos para última hora la selección de las sesiones, aunque siempre haya espacio para la flexibilidad de última hora. Mi experiencia es que los congresos acaban siendo una angustia total, no sabes bien elegir entre lo bueno y lo mejor. Después de la conferencia es muy útil leer también de nuevo el programa, seguro que tendrá un diferente significado y habrá aspectos a aprender o a profundizar. Incluso se puede profundizar en sesiones a las que no pudimos o quisimos asistir, pero que luego descubrimos que eran muy interesantes.
  2. Ayuda contactar con antelación y tratar de reservar momentos especiales para personas específicas con las que se quiera hablar. Un ejemplo es gente de la que hemos leído mucho y queremos conocer. Aunque no te contesten por email es un buen pretexto para acertarte a hablar…aunque luego no sepan de qué les hablamos. Además es un momento único para conocer a evaluadores de tu propio país, a los que el día a día te da pocas oportunidades de encontrar en tu propio país.
  3. Escribe, escribe y escribe ¡¡¡

-Escribe en las redes sociales utilizando el hastag de la conferencia #RELAC2015 mientras no me sugieran otro ¡¡¡. Incluso si no asistes, sigue si puedes por tweetter a algunos de los participantes, yo no soy nada @crariza1, en comparación con algunos animales – de las redes- sociales, cómo no hablar de Pablo Rodríguez-Bilella @txtPablo, aunque espero conocer a muchos más en la RELAC, porque seguro que hay much@s más que mi ignorancia esconde ¡¡¡¡

-Escribe lo que puedas y más  durante la conferencia, una vez que vuelvas a tu día a día, a tu rutina, será mucho más difícil escribir y el tiempo lo irá desdibujando todo. Aquí lanzo una propuesta a Pablo Rodríguez Bilella de si sería factible un EvalCentral en castellano,  quizás podríamos pedir asesoramiento a Chris Lysy @clysy el diseñador de EvalCentral.

  1. Relájate, aprende, haz amistades y disfruta. Habrá tensiones y mucho estrés para preparar las ponencias, pero será un proceso de aprendizaje único. Aprende sobre todo de tus errores y de los aciertos de los demás ¡¡
  2. Algunas recetillas aprendidas a base de sangre sudor y lágrimas…a base de muchos muchos errores- y aun así es el trabajo continuo del perfeccionamiento en la comunicación el seguirlas…

-Aspectos clave-involucremos a la audiencia, claridad en el mensaje, emoción en la ejecución.

Menos es más. Con unos pocos mensajes se pueden hacer grandes sesiones. El reto es involucrar a la audiencia o ponerla a prueba. Algo sagrado debería ser respetar tu tiempo, pero sobre todo el de los compañeros del panel y..el de la audiencia.

-En un taller el reto y la necesidad de flexibilidad son mayores.  1. Si no pudiste ajustar el taller a tu público porque no conocías el tipo de audiencia, esto se podría hacer sobre la marcha en base a un análisis rápido inicial de la audiencia. 2. Menos presentación y más trabajo en equipo que es donde la gente aprende y disfruta. La audiencia se angustia cuando pasamos las diapositivas sin dar tiempo a entender o enterarse de su contenido. 3. Trata de hacer un pre test y post sobre las ideas clave del taller.

-Evitemos si posible el karaoke powerpoint. Miremos a los ojos, contemos con la gente, elijamos unos pocos mensajes o puntos de contenido y desarrollemos notas relacionado con esos puntos. A veces ayuda buscar fotos para introducir en tu presentación. Ya para nota es tomarse el tiempo para coordinarse y tratar de evitar puntos de solapamiento con tus compañeros

-Debería SIEMPRE haber tiempo y espacio para intercambio con los asistentes. Ah i y recetilla de Sheila Robinson@sheilabrobinson, que las personas que pregunten –si preguntan-repitan la pregunta si no tienen micro…

-La AEA ha desarrollado mucho el tema de la presentación que es un tema super trabajado en esa conferencia mítica…a la que por cierto nunca he asistido…Aconsejo los siguientes links.

How to avoid bad conference presentations

Learning from post conference reflections

Youtube Ignite channel                   

Potent presentations Initiative de la AEA tiene entre otros los siguientes contenidos-

-El libro estrategia para la integración de la audiencia, con más de 20 formas para conectar con la audiencia y mantenerla implicada con tu presentación.

-El libro para los chairs o facilitadores de las sesiones.

-Mensajes. Cómo organizar una presentación para que sea un evento formativo para la audiencia.

-Cómo mejorar el diseño y la ejecución de las presentaciones

…aunque muramos en el intento…siempre resucitaremos con grandes experiencias de las que aprender ¡¡¡¡

Muchas gracias de nuevo a la organización de la RELAC y a la asociación peruana de evaluación por hospedar esta Conferencia ¡

Asociacionismo en evaluación –capítulo primero


He vuelto de la conferencia de la Sociedad Europea de Evaluación en Dublín con sentimientos algo contradictorios.
Ésta es la quinta conferencia de la EES a la que acudo. Sevilla 2002 siendo doctorando, Berlín 2004 doctorando, Lisboa 2008 siendo gestor de evaluaciones para la DGPOLDE, Praga 2010 siendo gestor de evaluaciones y…Dublín siendo evaluador independiente…
Hay gente que he seguido viendo desde hace doce años y otras caras nuevas. Lo que no ha dejado de cambiar es la comida y el precio…
-La comida…ya ha ganado el estilo anglosajón del MAL-comer en el que si no eres nórdico o anglosajón, ni comes ni haces networking…
-El precio…desde alrededor de 300 hasta más de 500 euros…y eso lo indiqué en la asamblea de miembros, que una conferencia que se centraba en la equidad no puede tener esos precios claramente injustos, 1. Porque cobra igual a un miembro del Banco Mundial al que financia su institución, que a un consultor independiente con familia numerosa, que no tiene asegurado sus ingresos para el próximo mes. 2. Porque da becas a personas de lo que denominan países en desarrollo sin incluir criterios de renta para ello…iguales pero diferentes…
Pero el precio de la conferencia es la punta del iceberg del problema del número de socios…Me queda claro que el tema del asociacionismo en evaluación no se ha resuelto ni en España ni en Europa. La EES necesita más socios dinámicos y proactivos y menos precio en sus cuotas…
Podríamos correr el riesgo de pensar que el asociacionismo no sirve…pero aplicando el esquema del cooperativismo agrario en el que se decía lo mismo, la misma respuesta puede servir…solo nos acordamos del asociacionismo cuando las cosas van mal…y cuando las cosas van mal, nada funciona…
El tema del asociacionismo en evaluación está de moda…en España tenemos la Sociedad Española de Evaluación y dos asociaciones o redes nuevas de dos másteres o magísteres de evaluación, la red internacional de evaluación y la asociación de profesionales de evaluación. Ello en ciernes del 2015, año internacional de la evaluación y el proceso Evalpartners…
Y ese es otro tema, como conseguir que las asociaciones cumplan su importante función social…cuando es una necesidad clara en nuestro gremio que como tantos otros en España no tiene carrera profesional y está fragmentado, dividido, desconfiado…que vive más del oportunismo que del desarrollo de oportunidades…
Más que nunca necesitamos del asociacionismo para aumentar nuestro capital social, humano y técnico, aumentando la capacidad de análisis, escucha, respuesta y servicio. Pero no debe ser fácil cuando hasta ahora no se ha llegado a las bases con una propuesta de verdadero trabajo en red y mutuamente beneficiosa, en la que se den soluciones de forma proactiva a problemas comunes o colectivos, en el que las bases se involucren de forma también proactiva y los boards o élites dirigentes, actúen para el pueblo y con el pueblo, y en representación de y con sus miembros…para ello haría falta –entre otras cosas – un ejercicio importante de mutua rendición de cuentas y aprendizaje- una dosis de nuestra propia medicina, vamos, de EVALUACION- Una evaluación de lo que este tipo de asociaciones o redes de evaluación han querido y venido haciendo, de su público objetivo deseado y real…pero esa es otra historia que tendrá que ser contada en otro momento…

Ponga un blog en su vida: gestione su conocimiento


A veces dudo que algo de lo que aquí escribo sea leído (más que por mí claro). Entonces, ¿para qué un blog?. ¿Algo más que para ahorrarte dinero en sesiones de psicólog@, o, para hacer caso a la recomendación de nuestro psicólog@? …Y aquí vengo al tema que hoy me toca: para gestionar el conocimiento. Pensaba titular el post de hoy “la insoportable levedad del conocimiento”,  pero he optado por un tema más propositivo. Ustedes, si están ahí, dirán.

Esta semana Simon Hearn escribía que desde BetterEvaluation iban a hacer una revisión de los próximos y recientes eventos que merecen la pena (congresos, talleres…), ya que estos eventos son una forma de gestionar el conocimiento. Siempre he estado de acuerdo: cualquier forma de comunicar lo que estamos haciendo es una forma de gestionar el conocimiento. A esto le añado yo la posibilidad de escribir posts de cualquier tamaño como una forma de pararse, pensar y comunicar (aunque sea a uno mismo). En la era del post modernismo y de la post comunicación, la post velocidad nos impide asimilar la mayoría de…los posts…y la información que se exhibe ante nosotros…

Así que como veis tras un tiempo vuelvo a retomar el tema de la gestión del conocimiento, ese enigma dentro de una incógnita dentro de un acertijo, del que todo el mundo acuerda la importancia, siempre importante, pero que pocas veces pasa a ser urgente. Y como con tantas cosas en la vida, todo se puede relacionar con la gestión del conocimiento, todo es gestión del conocimiento…nada es gestión del conocimiento.

Algunos apuntes sobre lo que ha deparado la semana desde algunas personas de la comunidad del conocimiento:

Una nota de curiosidad es  esta lista que ha aparecido de las personas más influyentes en temas de gestión del conocimiento. Algunos son conocidos como Dave Snowden, Nancy White, Ian Thorpe pero muchos han sido un descubrimiento. Increíble como algunos son capaces de hacer análisis de redes hasta llegar a estas listas (i)…Si no quiere poner su propio blog en su vida, ponga el de otros (¡ oíga ¡). Creo que en torno a la gestión del conocimiento en el sector del desarrollo, el de Ian Thorpe merece la pena “Knowledge management on a dollar a day”…para otro post dejo el hablar de los más influyentes en otras lenguas, aparte de la de los Beatles…pero se agradecen candidaturas.

Duncan Green acaba de recordarnos un interesante informe sobre algunos aprendizajes en torno a las respuestas a las últimas crisis alimentarias en el Sahel. Interesante referencia a un modelo para comprender las raíces de la inercia de “por qué las cosas no cambian” (“why change doesn´t happen), mediante el llamado modelo “3i”: ideas, instituciones e intereses. Según Duncan Green una combinación de estas tres “3i” subyace en el tipo de parálisis que estamos todavía viendo en las respuestas a las crisis alimentarias en el Sahel. Y parece que Duncan se ha dejado engatusar por ese relativamente nuevo mantra de la “resiliencia” del que ya hablamos en otro post…Como otros mantras (palabros o “buzzwords”) nuevo por fuera, viejo por dentro, como casi todos los mantras que periódicamente van surgiendo en nuestro sector 😉

Y otra forma de rizar el rizo es esta taxonomía del conocimiento (Mobee Knowledge Taxonomy of the Year), es decir, una taxonomía de actividades y conceptos relacionados con el conocimiento, los brokers del conocimiento y la comunicación de investigaciones.

Para terminar, recordemos que la próxima semana se desarrolla en el Institute of Development Studies en Sussex la conferencia ‘the politics of evidence’. Un evento en el que se reunirán algunos de los más sesudos pensadores, teóricos o teórico/prácticos del sector de la ayuda…supongo que especialmente del entorno anglosajón y nórdico (aunque sólo sea por el precio de la “entrada” al evento). Veremos las próximas semanas sus aportes a la resolución de algunos enigmas, dentro incógnitas, dentro de acertijos.

Primer Congreso Internacional de Estudios de Desarrollo


Esta semana tuvo lugar en Santander el I Congreso Internacional de Estudios de Desarrollo. Una oportunidad, desde el respeto, para encontrar, intercambiar, polemizar. Podemos encotnrar todas las ponencias en esta dirección

Por cierto mi ponencia está también ahí: De la política a la práctica: limitantes y precursores del cambio en la implementación de la Política de Desarrollo en España.

En general estuvo muy bien. Notaba un poco de pesimismo y frustración en algunos de los grupos. Hay que seguir…