Usar os resultados para produzir recomendações para os planos futuros
Resumo
Para a avaliação ter impacto, deve ser comunicada claramente àqueles que podem influenciar planos para o futuro, bem como para outros que poderiam se beneficiar a partir do que foi aprendido (por exemplo: gestores do programa, extensionistas de café e outros cafeicultores). É importante neste estágio pensar retrogradamente na tarefa: A) o propósito de sua avaliação; e B) as questões de avaliação. Estas devem ter sido desenvolvidas em conjunção com stakeholders chave – o que eles afirmaram querer que o processo do Monitoramento e Avaliação atingisse? A resposta para essa pergunta auxiliará a decifrar as informações que diferentes grupos irão querer receber.
- Desenvolver um plano para compartilhar os resultados com diversas audiências e em vários formatos
- Documentação das lições aprendidas e desenvolvimento de um estudo de caso para a caixa de ferramentas c&c
- Abordagem de comunicação apropriada para a audiência
- Identificadas oportunidades para incluir as lições aprendidas em planos futuros
Teoria
Além da produção de recomendações para o futuro, é importante que as lições aprendidas influenciem o desenvolvimento de planos para o que fazer a seguir. Uma simples tabela que organiza informação sobre datas para decisões de planejamento pode ser útil para alinhar a coleta de dados e a análise com necessidades de tomada de decisão, especialmente onde as decisões tiverem implicações álongo prazo (por exemplo: escolhas sobre a plantação de novas variedades de café ou a escolha de onde estabelecer novas plantações).
Questões de orientação para o uso dos resultados:
- Quem se beneficiaria ao ouvir o que aconteceu?
- Quais oportunidades existem para trazer a aprendizagem com intuito de informar e melhorar planos futuros e quem tem influência sobre isso?
- Como as lições da avaliação serão articuladas e compartilhadas?
- Como o progresso sobre as recomendações será monitorado e avaliado?
- Como você poderia desenvolver aprendizagens futuras?
- Que questões adicionais deveríamos estar perguntando?
Deve-se pensar cuidadosamente sobre as audiências que se pretende beneficiar a partir dos resultados e quais mensagens e formato seriam os mais apropriados. Por exemplo, alguns especialistas do setor de café podem estar interessados em detalhes técnicos enquanto outros podem querer um simples resumo dos resultados (os formuladores de políticas frequentemente apreciam um sumário executivo sucinto de apenas algumas páginas). Em contrapartida, alcançar produtores com mensagens chave pode envolver relatos retrógrados de reuniões, realização de eventos informais em um dia de mercado ou usar uma rádio comunitária. Pensar a respeito da disseminação o mais cedo possível para que se possa incluir isso no orçamento. Registrar os resultados-chave desta tarefa no modelo de plano de Monitoramento e Avaliação, ver Seção 2, Passo 5.
Partilha de experiências e estudos de caso por meio da caixa de ferramentas c&c
Uma forma fácil e efetiva de partilhar a sua experiência de implementação de atividades de adaptação é completar o modelo de estudo de caso na Seção 2 e fazer o carrega-lo na caixa de ferramentas c&c. As opções de adaptação que mostram os resultados esperados e prometem ser uma solução para ampliar a capacidade adaptativa, servem como exemplo para outros intervenientes no setor cafeeiro.
A caixa de ferramentas c&c é continuamente atualizada e alterada. São todos encorajados a se tornar parte da rede de trabalho c&c por meio do enriquecimento da caixa de ferramentas com sua experiência. Isso pode ser feito criando o próprio estudo de caso de implementação de certa opção de adaptação e compartilhar com a rede de trabalho da c&c. Informações adicionais sobre os estudos de caso podem ser obtidas através de contato direto com a equipe c&c.
Lista de websites e centros de informação
A seguir, encontram-se fontes úteis de informações adicionais sobre boas práticas em M&E:
UKCIP’s AdaptMe Monitoramento e Avaliação da ferramenta de adaptação:
www.ukcip.org.uk/wizard/adaptme-toolkit/
SEAChange: Comunidade de Prática sobre Monitoramento e Avaliação para a adaptação às mudanças climáticas
Aprendendo a se ADAPTAR: abordagens de monitoramento e avaliação na adaptação às mudanças climáticas e redução de risco de desastres – desafios, lacunas e formas seguintes:
www.ids.ac.uk/files/dmfile/SilvaVillanueva_2012_ Learning-to-ADAPTDP92.pdf
Kit de ferramentas da CARE - Adaptação Baseada na Comunidade:
www.careclimatechange.org/files/toolkit/CARE_ CBA_Toolkit.pdf
Manual da Care “Monitoramento Participativo, avaliação, reflexão e aprendizagem para a Adaptação baseada na Comunidade” (PMERL):
www.care.org/sites/default/files/documents/CC- 2012-CARE_PMERL_Manual_2012.pdf
Instituto de Recursos Mundiais “Fazendo a Adaptação Contar” fornecendo conceitos e opções para o Monitoramento e Avaliação de adaptação às Mudanças Climáticas:
pdf.wri.org/making_adaptation_count.pdf
Nota de Orientação da UKCIP: “Doze motivos do porquê a adaptação às mudanças climáticas é desafiadora”:
Orientação Prática
Objetivos
- Garantir que os resultados da avaliação são compartilhados efetivamente com os outros que se beneficiariam deles.
- Garantir que mudanças necessárias são feitas para planos futuros.
Resultados esperados
- Realizado e compartilhado um estudo de caso escrito no modelo c&c.
- Avaliadas as decisões futuras que precisam levar em conta os impactos de mudanças climáticas, e o período de tais decisões.
- Conforme solicitado, desenvolvido um plano para levar adiante as ações identificadas.
- Realização da Parte E do plano de avaliação
Tempo necessário
Aproximadamente meio dia para o estudo de caso. Preencher os modelos pode ser feito de 30 minutos á uma hora, dependendo de quais discussões de planejamento já ocorreram e o nível de entendimento do grupo.
Questões orientadoras
- Houve um aumento na consciência de adaptação às mudanças climáticas em famílias de agricultores e com o grupo de stakeholders mais amplo envolvido no processo de implementação? Quem liderou isso?
- Que tipo de engajamento de stakeholder foi mais bem sucedido na capacitação para a adaptação e por que (por exemplo:treinamentos,entrevistas, visitas a campo, etc.)?
- Como a abordagem c&c, ou seus aspectos específicos podem ser melhorados (por exemplo: Workshops de Testemunhas do Clima, ECP, etc.)?
- Que diferenças ocorreram entre a taxa de adoção por produtores do sexo feminino e do sexo masculino para práticas particulares? Que diferenças existiram entre o quão fácil e/ou o quão rápido foi para encorajar produtores do sexo feminino e do sexo masculino a adotar as medidas de adaptação sugeridas?
- Como você priorizaria as diferentes opções de adaptação implementadas, mantendo em mente a eficácia destas em relação á adaptação às mudanças climáticas, mas também a viabilidade em implementá-las tanto com produtores do sexo masculino quanto do sexo feminino, bem como com suas famílias?
Procedimento
- Documentar lições aprendidas desenvolvendo um estudo de caso para a caixa de ferramentas c&c.
- Resumir o que aprendeu no processo de implementação da abordagem c&c (cobrindo todas as atividades dos Passos 1 a 4) usando o modelo fornecido na caixa de ferramentas c&c. Pode-se, então, fazer upload desse resumo na caixa de ferramentas c&c, a fim de dar suporte aos outros no desenvolvimento de próprias atividades de adaptação. O modelo de estudo de caso (ver exemplo na página 166) fornece um formato útil para auxiliá-lo a refletir nas lições aprendidas em relação às ferramentas usadas e atividades implementadas, e também em outros fatores importantes como a participação de stakeholders e o papel de gênero.
- Use os modelos de implementação e de planejamento de atividade para garantir que suas recomendações informam planos futuros (mais sobre implementação e planejamento de ações abaixo).
Modelo de implementação e planejamento de atividades
Modelo de implementação
Depois de obtido um determinado número de recomendações, este modelo pode ajudar na obtenção de um sentido de prioridade e ver o quão fácil é implementar uma atividade (por exemplo: em relação ao custo, temporização, quem precisa ser envolvido, etc.).
Modelo de planejamento de atividade
Este modelo pode ser usado se tiver uma lista de
recomendações da avaliação que gostaria de incluir
em futuros planos.
Ferramentas participativas para a avaliação
Objetivos
- Compartilhar e coletar informações básicas ao longo de um espectro de um extremo a outro.
- Compartilhar e coletar ideias sobre uma única dimensão de um problema, por exemplo, grau, extensão ou quantidade de algo.
Quando usar linhas de espectro
As linhas de espectro são muito versáteis. Elas podem ser usadas para coletar informações básicas sobre quem participou de treinamentos ou atividades da c&c e como os participantes se sentiram sobre o apoio que lhes foi dado. Fornecem um sentido do quão confiante os produtores se sentem em criar resiliência ao clima. Se você quer obter dados extras sobre uma questão particular, por exemplo, se existem diferenças entre homens e mulheres, você poderia pedir aos homens e mulheres para usar marcas de cores diferentes.

Como usar linhas de espectro
Existem dois tipos principais de pergunt
- Uma pergunta sobre informação básica com valores objetivos marcados no espectro, por exemplo: “Quanto café a sua propriedade produz por ano?”
- Uma pergunta que peça impressões e atitudes, por exemplo: “Qual a probabilidade de recomendar o treinamento que você recebeu para outros cafeicultores?” ou “Suporte para produzir um plano de adaptação”.
Essas linhas de espectro permitem que você se aprofunde mais no por que um participante posicionou a sua marca num ponto específico, tanto através do questionamento direto ou pedindo para os participantes marcarem sobre a linha, como na Figura 44.
Você pode começar a considerar o que teria de mudar para fazer com que eles movam suas marcas para a direita ou para a esquerda. Também observe as tendências com o tempo, bem como esperanças e ambições, pedindo aos participantes para marcar onde eles estiveram em relação a esta questão um ano antes e onde eles gostariam de estar daqui a um ano (ou algum outro período).


Objetivos
- Identificar o que apoia e o que restringe uma linha de ação em particular.
- Avaliar o progresso por realizar um diagrama H em diferentes pontos de tempo.
- Compartilhar uma série de visões sobre nível de progresso, e o que dá suporte ou restringe isso.
- Identificar quais próximos passos seria mais eficazes em fazer progresso relativamente a uma meta desejada.
Quando usar um diagrama H
O diagrama H pode ser adaptado para encaixar um número de aplicações, por exemplo, como uma ferramenta para auxiliar os moradores a avaliar o desempenho de parcerias, programas, agências e iniciativas; como uma ferramenta para identificar indicadores locais para o Monitoramento e Avaliação, como uma forma de identificar próximos passos e prioridades para agir e na avaliação de workshops e treinamento.
Como usar um diagrama H
O diagrama H tem a forma de uma ampla letra ‘H’ que pode ser usado em numerosas configurações para classificar algo ao longo de uma escala de zero a dez (por exemplo, a confiança em responder às mudanças climáticas e avaliação do nível de participação de produtores num processo de tomada de decisão). Fornece uma representação visual fácil de entender, de respostas de participantes que é avaliada para determinar o que está indo bem, o que está bloqueando o progresso e como a situação pode ser melhorado.

Objetivo
Entender os fatores que influenciam uma situação particular, tanto por dirigir o movimento em direção a uma meta em particular (forças de motivação) ou por bloquear tal movimento (forças de restrição ou barreiras). Essas forças podem ser muito dinâmicas, variando tanto com o tempo e com a experiência e consciência daqueles que receberam a tarefa de identifica-las. Podem incluir aspectos como motivações, valores, necessidades, personalidades, metas, ansiedades e ideais, bem como aspectos mais estruturais de tomada de decisão organizacional.
Quando usar campos de força
Campos de força podem ser usados em todos os estágios do desenvolvimento de um projeto e do planejamento. Podem também ser usados para analisar porque um processo de adaptação evoluiu da forma que evoluiu e para planejar como o projeto pode mudar no futuro. Campos de força o auxiliam a entender que fatores positivos contribuíram para o progresso e também quais obstáculos foram superados.
Como usar campos de força
- Decida primeiro o problema para o qual usará o campo de força para explorar. Por exemplo, “avaliar o que deu suporte e o que restringiu a implementação de um plano de atividade de adaptação”.
- Em seguida, encoraje os participantes a listar todas as forças que deram suporte à implementação da atividade de adaptação e escreva essas em pedaços de papel com setas em um lado do papel.
- Liste todas as forças que ficaram no caminho da implementação do plano de atividade e acrescente- as do outro lado do papel. Cada força motivadora ou restringente deve ser então classificada colocando- se mais perto ou mais longe do centro do papel, de acordo com o poder da força. uu Encoraje os participantes a explorar como pode aumentar os fatores motivadores e diminuir os fatores restringentes. Pode identificar quais próximos passos pode tomar para colocar isso em prática. Por exemplo, na ilustração abaixo, uma das coisas que desaceleram o progresso está listada como “a informação sobre como um clima está mudando parece incerta”. Como é improvável que possa aumentar a incerteza da informação, poderia discutir como se pode tomar uma decisão apesar dessa incerteza, por exemplo, explorando decisões ‘sem arrependimento’, que ainda são úteis numa série de diferentes climas futuros.

Objetivos
- Exercícios de rio de vida podem ser usados para refletir no progresso de um processo de adaptação até a atualidade, para identificar o que funcionou bem e que dificuldades foram encontradas.
- Partilhar diversas perspectivas do mesmo projeto e identificar terreno comum.
Quando usar rios da vida
Esta ferramenta pode ser usada para auxiliar as pessoas a conhecerem-se umas às outras, refletir em seus relacionamentos, explorar esperanças e medos de um novo risco, refletir sobre o que foi surpreendente ou difícil num projeto que agora acabou.
Como usar rios da vida
- Usando a metáfora de um rio, peça aos participantes para desenhar uma figura que reflita sua experiência de participação do processo de adaptação. Eles podem tanto cada um desenhar sua própria figura quanto fazer uma em grupo.
- Faça com que eles reflitam sobre suas experiências e identifiquem aspectos positivos que foram alcançados, escolhas chave (representadas por tributários), e desafios ou contratempos (águas agitadas, pedras ou monstros). Outras imagens (barcos, peixes, pontes, pedras, solo pantanoso/superficial, etc.) podem ser usados para representar diferentes aspectos da jornada.

Objetivos
- Representar como os participantes veem todos os aspectos de uma situação, incluindo os fatores, pessoas, problemas, processos, relacionamentos, conflitos e motivadores.
- Compartilhar o que os participantes veem como importante, porque eles podem estar se sentindo confusos e onde podem começar a buscar formas de melhorar a situação.
Quando usar figuras ricas
- Figuras ricas podem ser usadas no estágio de avaliação para compartilhar perspectivas sobre o propósito de se avaliar um processo de adaptação.
- Dependendo da pergunta feita, figuras ricas podem também ser usadas para comparar experiências diferentes do mesmo processo e as razões para essas experiências diferentes, ou quão diferentemente os participantes valorizam diferentes aspectos.
Os participantes frequentemente se preocupam com o padrão de suas habilidades de desenho, mas frequentemente acabam por produzir figuras que demonstram seus pensamentos e preocupações de forma muito mais concisa do que respostas diretas numa entrevista. Abaixo estão alguns exemplos de figuras ricas ilustrando como um grupo de participantes percebeu um processo de adaptação que eles participaram.
Como usar figuras ricas
- Comece com grandes folhas de papel e muitas canetas coloridas e peça aos participantes para simplesmente desenhar o que eles veem estar acontecendo numa situação específica, ou em resposta a uma solicitação particular. Eles devem usar figuras para representar a situação de uma forma que possa ser comunicada a outras pessoas. Isso deve levar entre 10 e 15 minutos.
- Dê a eles introduções, como as seguintes:
- “Desenhe uma figura que explique sua experiência na participação neste processo.”
- “Desenhe uma figura que explique como você está se sentindo atualmente a respeito de responder às mudanças climáticas.”
- Faça com que eles expliquem suas figuras para outro participante ou para o grupo maior (se eles quiserem). Compartilhar diferentes figuras ricas de como as pessoas veem o processo de adaptação permite que você identifique conexões, diferenças, oportunidades e contradições que poderiam ter sido perdidas em discussões diretas. Permite aos participantes questionar suas suposições sobre o que está acontecendo que pode resultar em repensar como eles entendem a situação e assim influenciar o que deve ser avaliado. Um facilitador pode servir para identificar onde os temas em comum e diferentes ideias emergem.


Objetivo
Mapas de conversa apresentam entendimentos e reflexões de uma situação emerge de uma conversa.
Quando usar mapeamento de conversa
Essa ferramenta pode ser usada para capturar diferentes observações, sentimentos e reações em geral a um fator estimulante. Este é normalmente fraseado como uma questão, por exemplo: “Qual foi a sua experiência na participação da implementação de opções de adaptação às mudanças climáticas?” Ou, “O que você mais valorizou durante a participação na implementação de opções de adaptação às mudanças climáticas?”

Como usar o mapeamento de conversa
- Registre o fator estimulante no centro de um grande pedaço de papel com um círculo desenhado ao seu redor.
- Peça a um participante para responder ao estímulo, para começar uma conversa que é então registrada no papel e ligada ao estímulo central.
- Faça com que os outros respondam a isso ou ao estímulo central e registrem também as suas contribuições para causar a ramificação do mapa. Não deve haver tentativas de moldar este processo, pois, é uma ferramenta para entender toda a série de perspectivas sem tentativas de coletá-las ou analisa-las neste estágio.
- Se o mapa se tornar muito grande para o papel, registe noutro papel. É normal que o mapa se torne muito bagunçado e cheio de informação.
- Quando as pessoas tiverem ouvido o suficiente (ou o tempo esgote), deve-se refletir sobre o mapa (e o processo de fazê-lo). Pergunte-se aos participantes o que o mapa mostra e também sobre as suas percepções ou entendimentos sobre o estímulo. Desenhe temas chave e tudo que tiver mudado nas perspectivas das pessoas como resultado da criação do mapa.
Exercícios de classificação
Vários tipos diferentes de exercícios de classificação são úteis para uma avaliação – particularmente nos estágios de coleta e análise de dados – para determinar prioridades para ação ou como diferentes opções desempenham contra um grupo aprovado de critérios, entre outras informações. A última classificação foi descrita em “Projetando um plano para coletar evidências” do Passo 5.
Diagramas de Venn
Diagramas Venn são formas de representar as relações entre stakeholders e as diferenças de poder entre eles. Podem ser usados numa avaliação para comparar como se pensava que as relações entre stakeholders chave fossem no início da implementação de opções de adaptação com como elas eram ao final. Demonstram também como as relações mudam e por que. Os diagramas de Venn são descritos na Seção 2, Passo 2.
Abordagens visuais e narrativas adicionais
Existe um número de ferramentas participativas adicionais que podem ser usadas para coletar mais evidências qualitativas, que são frequentemente necessárias para responder outros tipos de questões de avaliação, mas requerem mais tempo e recursos. As abordagens não são discutidas profundamente neste manual, mas são simplesmente mencionadas a fim de mostrar o alcance do que está disponível para aqueles que gostariam de conduzir um processo de avaliação que investiga as experiências de participantes com mais profundidade. Para mais informação sobre cada uma das abordagens, sigam-se os links fornecidos.
Teatro participativo
Teatro participativo é um diálogo de múltiplos stakeholders que usa o teatro como uma forma informal, criativa, mas séria de explorar diferentes perspectivas e respostas ao longo da cadeia de valor do café. Isso permite que diferentes atores troquem informações, formulem e priorizem problemas e identifiquem soluções coletivas através da escrita e do desempenho de pequenas histórias.
Isso não envolve uma peça ou produção formal. O termo ‘teatro’ simplesmente refere-se aos participantes, sendo tanto ‘atores’, que narram, escrevem e atuam em pequenas histórias, e também uma ‘audiência ativa’ que assiste pequenas apresentações. A ideia é que, seguindo cada história curta, o diálogo ocorra entre ato-res e a audiência, em contraste com o teatro tradicional no qual os atores se apresentam e a audiência ouve. O papel da audiência é auxiliar cada grupo de participantes a refinar o problema e as soluções apresentadas.
Essa abordagem foi usada extensivamente no mundo (algumas vezes é chamada de ‘teatro para o desenvolvimento’) e tem sido especialmente bem sucedida com o setor de café em Uganda.
Um vídeo participativo é uma ferramenta que pode ser usada por participantes para contar a história do que mudou como resultado da implementação de adaptação às mudanças climáticas em suas áreas. O filme finalizado pode ser usado para apresentar diretamente as ideias aos financiadores e tomadores de decisão fora da área local. Deste modo, o aprendizado pode ser compartilhado mais amplamente para influenciar os processos de tomada de decisão além dos contextos locais.
Histórias fotográficas participativas
Histórias fotográficas podem ser usadas de forma similar para explicar como os meios de subsistência, vulnerabilidade e as oportunidades mudaram ao longo do processo de adaptação, e o que influenciou estes do ponto de vista de um participante específico, por exemplo: o cafeicultor.
Esta é uma ferramenta simples. Empresta a cada participante ou grupo de participantes uma câmera e pede-lhes para tirar fotografias de coisas que eles sentem que representam algo sobre suas experiências no processo de adaptação. Isso pode incluir o que funcionou bem e o que não funcionou bem, e quaisquer coisas surpreendentes que talvez tenham sido inesperadas.
Pode também ser mais específico com as instruções. Por exemplo: peça aos participantes para tirar 10 fotografias de coisas que eles acham que correram bem, e 10 fotografias de coisas que representam tudo o que precisa de melhoria adicional. Quando as câmeras forem devolvidas e as fotografias reveladas, podem ser usadas para comparar e contrastar, e para estimular a discussão. Busque sobreposições de onde pessoas fotografaram as mesmas coisas.
Mapeamento de resultados foi desenvolvido pelo Centro de Pesquisa de Desenvolvimento Internacional no Canadá (IDRC) como uma forma de planejar, monitorar e avaliar como um foco no que contribui para resultados obtidos por intervenções, ao invés de tentar mensurar diretamente a atribuição da mudança a uma intervenção organizacional particular.
O mapeamento de resultados tem muito a oferecer na avaliação de opções de adaptação, já que aceita que processos adaptativos são complexos e dinâmicos; reconhece que pode haver consequências inesperadas e não pretendidas de uma dada opção. Também reconhece que os resultados surgem de um número de fatores ao invés de uma ação única. O mapeamento de resultados fornece uma forma de desenhar juntamente diferentes contribuições para um resultado, que é essencial a fim de aprender mais sobre o que dá suporte à uma adaptação bem sucedida.
Essa abordagem é baseada em ouvir o que as pessoas (beneficiários, participantes, stakeholders, etc.) pensam que foram as mudanças mais significativas resultantes de um processo de adaptação. Não requer quaisquer habilidades profissionais para facilitar e é fácil de comunicar através de culturas, pois, as pessoas geralmente acham fácil contar histórias sobre eventos que acham que foram importantes.
Também não há a necessidade de explicar o que um indicador é e é uma boa forma de pegar mudanças imprevistas que possam desafiar suposições do que está acontecendo. Essa abordagem encoraja as pessoas a se engajar na análise bem como em estágios de coleta de dados de um projeto de adaptação, já que eles têm de explicar porque eles acreditam que uma mudança é mais importante do que outra. Pode ser usado para monitorar e avaliar iniciativas de baixo para cima que não têm resultados predefinidos contra os quais avaliarem.
Uma história de aprendizagem é descrita como um ‘conto narrado conjunto’ entre pesquisadores externos e atores internos sobre um resultado tangível. Isso visa agregar a análise e a história de forma que tenha valor tanto para aqueles originalmente envolvidos no trabalho e outros buscando aprender dele. Uma avaliação de história de aprendizagem tenta entrar nos aspectos humanos ‘bagunçados’ do que aconteceu durante a sua implementação. Busca apresentar um número de perspectivas sobre uma situação, ao invés de sintetizar diversas avaliações numa única história. É apresentada como uma avaliação de múltiplas vozes e de múltiplos níveis, que tabula o que aconteceu e fornece citações dos intervenientes envolvidos e reflexões de pesquisadores durante o processo e .