Este post apareceu originalmente no blogue do Laboratório de Aprendizagem da USAID.

por Lori Ashford com a contribuição de Soumya Alva e Reshma Naik

A maioria dos projectos globais de saúde e desenvolvimento incluem uma componente de reforço da capacidade, mas como é que medem bem se foi alcançada uma maior capacidade e os determinantes subjacentes do desempenho? As actividades de desenvolvimento da capacidade (os inputs) devem, em última análise, conduzir a um melhor desempenho (o resultado). Mas quais são as melhores ferramentas e indicadores para medir os resultados - a capacidade adicional - que conduzirá ao resultado do desempenho?

Para responder a esta pergunta, foi realizada uma análise paisagística pelo MOMENTUM Knowledge Accelerator, um dos seis prémios globais sob a égide do MOMENTUM, financiado pela USAID, que trabalha com países para acelerar melhorias nos serviços de saúde materna, neonatal e infantil.

Falta de Ferramentas Existentes

A análise constatou que a maioria das ferramentas existentes fica aquém das expectativas quando se trata de medir as muitas dimensões de capacidade que são críticas para atingir os objectivos finais de uma entidade. Por exemplo, as ferramentas:

• Tendem a concentrar-se nas organizações e a excluir outras unidades de análise, tais como sistemas, redes, e comunidades que influenciam os resultados na saúde.
• Muitas vezes confiam na auto-avaliação e fazem pouco uso de provas.
• Foco na capacidade latente (potencial) em vez de no desempenho e pouca informação sobre os determinantes subjacentes do desempenho.
• Não estão muitas vezes ligados a uma teoria explícita de mudança.
• São frequentemente inadequados para ambientes altamente complexos em que os sistemas são descentralizados, as tarefas não são simples, e as interacções são dinâmicas e podem variar dependendo da situação.

Compreender a "capacidade" e como se liga ao desempenho

Para medir a capacidade de forma eficaz, precisamos de compreender os seus atributos. No seu cerne, a capacidade envolve a capacidade de fazer e alcançar coisas e fazer mudanças conforme necessário, e o desenvolvimento da capacidade implica identificar e abordar áreas de desempenho que precisam de ser melhoradas. Uma dimensão importante do desenvolvimento da capacidade é a melhoria da resiliência. Porquê a resiliência? Porque permite que indivíduos, organizações e sistemas prosperem em ambientes complexos e imprevisíveis - isto é, podem antecipar riscos, enfrentar adversidades e recuperar de forma atempada e eficaz.

A capacidade pode ser entendida como os atributos que permitem a um actor que trabalha a qualquer nível (sistema, organização, comunidade, ou indivíduo) ter um bom desempenho em condições de alta complexidade. Idealmente, o desenvolvimento de capacidades também constrói "capital social" - ou seja, coesão social, confiança, e um sentido de missão partilhada - porque é uma fonte de vitalidade, crescimento, e eficácia para entidades que promovem a saúde pública.

Escolher as medidas certas de capacidade

São necessárias medidas apropriadas que captem o papel de resiliência, melhoria do desempenho e capacidade a vários níveis (individual, comunitário, organização e sistema) para examinar o efeito do reforço da capacidade das organizações que trabalham em ambientes complexos. Estas medidas devem ser fiáveis, fáceis de utilizar, e capazes de produzir resultados accionáveis. Devem concentrar-se nos efeitos das intervenções e actividades do programa sobre resultados, desempenho, e novas soluções utilizando métodos de monitorização de baixo nível de complexidade para recolher e analisar informação. Os quatro tipos de medidas envolvem a compilação de provas a partir:

• Entidades a nível organizacional, tais como organizações parceiras locais que modificam programas para reflectir melhor as normas sociais, valores, crenças e práticas locais que influenciam os resultados em matéria de saúde.
• Entidades a nível do sistema, tais como instalações de cuidados de saúde ou ONGs locais que se envolvem na promoção de cuidados de saúde ou na prestação de serviços que modificam programas para reflectir melhor as normas sociais, valores, crenças e práticas prevalecentes localmente que influenciam os resultados de saúde.
• Profissionais de saúde que utilizam o cliente ou outro feedback para melhorar o alcance, a cobertura ou a eficácia do programa.
• Instalações de prestação de serviços de base comunitária que utilizam o feedback do cliente ou outros para melhorar o alcance, cobertura, ou eficácia do programa.

As abordagens de recolha de dados para estas medidas podem ser adaptadas com base na natureza das actividades e sistemas do projecto, bem como nos recursos disponíveis. Em alguns casos, pode envolver questionários e respostas, enquanto, noutros, uma simples revisão das descrições escritas. É importante notar que os indicadores propostos se concentram em práticas que, quando realizadas regularmente, estão directamente ligadas a melhorias na qualidade, cobertura e eficácia do programa.

Lições sobre a avaliação da capacidade

A revisão também identificou lições importantes sobre avaliação de capacidade, extraídas de um estudo que analisou as experiências de 20 ONG que aplicaram uma ferramenta de avaliação de capacidade, a Auto-Avaliação Orientada para a Discussão (DOSA), durante quatro anos.

O instrumento ou metodologia de avaliação deve:

1. Ser integrado num processo mais amplo de transformação que envolve o estabelecimento de prioridades para o desenvolvimento de capacidades, o planeamento das actividades e a medição dos resultados.
2. Estar fundamentado numa teoria de mudança que seja consistente com a missão e objectivos da entidade.
3. Lançar luz sobre as causas do subdesempenho, que podem incluir conhecimentos ou competências inadequados, bem como baixa motivação, falta de incentivos, fraco apoio de supervisão, recursos insuficientes ou outros factores.
4. Ajudar os utilizadores a identificar como as várias capacidades (por exemplo, prestação de serviços, relações externas, e gestão estratégica) se relacionam umas com as outras para melhorar o desempenho global.
5. Promover um diálogo rico entre os participantes. Isto melhora muito o processo de avaliação porque os conhecimentos adquiridos podem fomentar a aprendizagem e criar uma visão partilhada para orientar futuras decisões. O diálogo constrói capital social, o que por sua vez melhora o desempenho em entidades orientadas para a missão.

Instrumentos de avaliação de capacidade bem concebidos fazem eles próprios parte do desenvolvimento de capacidade; os instrumentos devem ajudar os participantes a pensar criticamente sobre o quê, bem como o porquê do desempenho. O processo de avaliação deve ajudar os utilizadores a criar um ambiente propício a demonstrações consistentes e contínuas da capacidade. Um resultado importante da avaliação da capacidade é a aprendizagem, que é uma pedra angular da resiliência e da capacidade de adaptação.

E, falando de adaptação, cada projecto deve desenvolver as suas próprias abordagens de avaliação e indicadores que sejam específicos e adaptados aos seus objectivos globais. Se o pessoal do programa que desenvolve estas ferramentas incorporasse muitas ou todas as lições desta análise paisagística, as iniciativas de desenvolvimento de capacidades tornar-se-iam mais eficazes.

Este blogue é baseado no trabalho de Beryl Levinger. Para saber mais, leia o artigo completo do MOMENTUM intitulado Measuring and Assessing Capacity (Medindo e Avaliando a Capacidade): A Landscape Review (2021).