Debido a que el tiempo y los recursos son a menudo escasos, es bueno discutir abiertamente los retos que se presentan al recolectar los datos. De esta manera, usted puede tener claras las implicaciones de sus opciones en el diseño de la evaluación (adaptado de MERAP):

• Uso de datos existentes versus obtención de nuevos datos: Siempre tendrá que haber un equilibrio entre lo que le gustaría monitorear y evaluar y lo que es realmente posible, en función del tiempo y los recursos disponibles. Tiene sentido utilizar los datos que ya existen y son de fácil acceso, sobre todo cuando los recursos son limitados, aunque estos datos eventualmente no sean los más relevantes y simplifiquen en exceso o incluso nos distraigan del objetivo general de aumentar la resiliencia. Por ejemplo, los datos existentes pueden darle una medida promedio del contenido de humedad del suelo a nivel de campo, pero cuando se observan los impactos a escala de las plantas, éstos no sustituyen la medición de la humedad a menor escala donde el muestreo tiene en cuenta los cambios en el tipo de suelo y la topografía.
• Identificación de indicadores localmente apropiados en contraste con indicadores determinados externamente: Una buena adaptación a nivel local es específica y los sistemas de M&E se deben adaptar a las condiciones locales. Sin embargo, la participación de los productores y otros stakeholders en el desarrollo de estos indicadores puede llevar mucho tiempo, lo que hace que los indicadores determinados externamente parezcan más atractivas. Las mediciones bajo parámetros definidos externamente también pueden ser más fáciles de comparar con otras áreas. Una forma de abordar esto es interpretar los indicadores determinados externamente para asegurar que son relevantes en el ámbito local. Por ejemplo, un indicador determinado externamente podría ser el acceso a datos climáticos precisos. Esto podría interpretarse a nivel local, preguntando si hay buenos enlaces con estaciones meteorológicas y organizaciones de investigación.
• Desarrollar capacidades locales para llevar a cabo el M&E versus uso de expertos externos: el M&E puede ser una oportunidad para empoderar a los productores de café y a otros stakeholders con el objeto que aprendan sistemáticamente de sus experiencias. Para crear las capacidades a largo plazo, los productores deben no sólo participar en los procesos de adaptación, sino también diseñar y gestionarlos. Esto requiere una mayor inversión de tiempo, ya que este tipo de cambio no ocurre rápidamente. Es posible que externos puedan hacer el trabajo más rápido, pero de lejos implicaría generar menos capacidades de adaptación en el largo plazo. Lo ideal sería capacitar a los productores a nivel local en cómo realizar la evaluación. Esto generaría capacidad local instalada para identificar la gravedad de los riesgos climáticos, los supuestos sobre qué actividades podrían construir la resiliencia local y desarrollar un plan para reunir evidencia para comprobar estos supuestos.
• La evaluación del éxito de las actividades planificadas versus el aprendizaje de las consecuencias no previstas del trabajo: la evidencia necesaria para el M&E es, a menudo, una mezcla de datos fácilmente medibles relativos a la realización de las actividades y las “historias de cambio” más cualitativas que revelan cosas que no se previeron al principio. Estas historias de cambio son importantes, ya que ayudan a poner a prueba los supuestos sobre lo que sustente las buenas prácticas y lo que se interpone en el camino.

Un indicador proporciona información específica sobre el estado o condición de algo. En el caso del M&E a menudo se trata de proveer información sobre el cambio (p.ej., ¿se han vuelto más resilientes los productores?). Los indicadores son una parte importante de la exploración de los procesos de cambio y de la exploración sobre qué medidas de adaptación funcionan o no funcionan, en qué contexto y por qué.

No existe un sólo conjunto de indicadores que sea aplicable a todos los procesos de implementación de opciones de adaptación. Los indicadores se deben elegir en relación con las actividades de adaptación que estaban previstas y el contexto en que se llevaron a cabo. Mediante el desarrollo de indicadores como parte de la hoja de ruta del proyecto, se asegurará que estén relacionados con sus objetivos.

Suponiendo que usted desarrolló la hoja de ruta del proyecto en la Etapa 3, esta tarea le ayudará a recopilar la información con el fin de entender cómo es que funciona la ruta en la práctica. Si no ha desarrollado una hoja de ruta del proyecto, esta tarea aún le ayudará a reunir las evidencias que necesita para sus actividades de M&E, pero se recomienda consultar primero la Etapa 3.

Los indicadores están presentes tanto en los procesos de monitoreo como en los de evaluación, pero no todos los indicadores se utilizarán para ambos procesos. Por ejemplo, puede ser costoso y logísticamente imposible hacerle seguimiento a los cambios de actitudes de los productores durante la implementación de las opciones de adaptación (como parte de su monitoreo), pero puede que desee hacerlo como parte de una evaluación de medio término. Del mismo modo, puede ser que su evaluación no requiera datos mensuales de las parcelas demostrativas, pero sí los datos consolidados del desempeño general de las mismas. El monitoreo del avance depende de la selección de indicadores que sean capaces de representar los cambios. Estos indicadores deben vincularse a sus esfuerzos de implementar y validar las opciones de adaptación (p.ej., hacer uso de los datos de observación de las parcelas de ensayo, véase Tabla 19).

Existen dos tipos básicos de indicadores para el M&E, aunque es probable que la mayoría de los procesos usen una combinación de ambos:

los indicadores de resultado demuestran que un resultado específico se ha logrado (p.ej., reducción de las pérdidas económicas relacionadas con enfermedades entre los pequeños productores). Los indicadores de resultados son muy útiles, pero a menudo pueden ser difíciles de utilizar en la evaluación de las actividades de adaptación, ya que con frecuencia existe mucho tiempo entre la implementación de la opción de adaptación y el resultado que se logra (p.ej., si no hay un brote de roya en una zona, ¿cómo podemos saber si las pérdidas se reducen como resultado del proyecto?). Por tanto, es útil usar también indicadores de procesos para medir el avance hacia el logro de un resultado (p.ej., el número de productores que actualmente utilizan medidas de prevención de la roya del café o el número de productores que se han capacitado). Estos indicadores de procesos son valiosos para entender si la resiliencia está aumentando, aún si no se ha puesto a prueba la resiliencia debido a un evento climático.

Para elegir qué evidencia recopilar o qué indicadores medir, consulte las preguntas de evaluación que usted desarrolló en la sección anterior. Considere para cada una el tipo de evidencia o indicador más adecuado, teniendo en cuenta los recursos y las capacidades disponibles. Registre los productos clave de esta tarea en la plantilla del plan de M&E, Sección 2, Etapa 5.