Definição operacional de avaliação

 

     Analisar

ose uma ação empreendida em vista de um objetivo corresponde a uma necessidade coletiva, ose obteve os efeitos desejáveis ou outros efeitos colaterais, oe exprimir um juízo sobre a distanciamento que normalmente se verifica, para propor eventuais modificações que tenham em consideração as potencialidades manifestadas

 

O quê se avalia

     A relevância dos objetivos & necessidades;

     A coerência entre objetivos e meios;

     A eficiência entre meios e resultados;

     oA eficácia entre objetivos propostos e impactos obtidos; As conseqüências esperadas e inesperadas ao longo da caminhada

 

 

Quem avalia

o   O avaliador com a participação dos diversos interessados com vários níveis de participação segundo o grau e a amplitude:

      O grau de participação: depende se é uma avaliação externa ou se é participativa (interna)

      A amplitude da participação: depende do envolvimento dos dirigentes ou também dos cidadãos (operadores, educadores, pais, alunos etc.)

 

 

Quando se avalia

   Antes (ex-ante);

   Durante (in itinere);

   Depois (ex post).

Questões de método

Entre 1960 1975:  “Applied social research”

      Analise dos objetivos;

      O avaliador é externo;

      Os valores não contam;

      A palavra de ordem: cientificidade, objetividade;

      A questão: tem coerência ou discrepância entre objetivos e resultados? São seguidos os procedimentos previstos ou outros?

 

Entre 1975-85 e 1980 ...

      Uso de métodos mistos (quanti-qualitativos);

      Analise dos méritos do programa, que se tornam critérios de avaliação;

      O avaliador parte dos objetivos e dos critérios para depois perguntar-se sobre as conseqüências que possam acontecer, sejam elas esperadas ou não, positivas ou não;

      O avaliador parte da questão: “o que foi obtido é BOM? (na escala de valores?); Valia a pena fazer o que fizemos? Como se poderia melhorar a ação?

      Participam da avaliação todos os interessados?;

      A finalidade é a de melhorar a ação

 

 

MODALIDADES DE AVALIAÇÃO

 

Existem muitas modalidades para avaliar um programa. Depende do ponto de vista do qual partimos. Avaliar é uma arte. Podemos avaliar utilizando-nos de diversos métodos e pontos de vista.

   Em chave organizacional;

   Em base a critérios pré-estabelecidos;

   Em base aos critérios da “qualidade total”;

   Em chave educativa

Eficiência

Eficácia

 

 

AVALIAÇÃO EM CHAVE ORGANIZACIONAL

o1. Avaliação da definição do projeto: as necessidades, o contexto (território), a viabilidade da instituição; o2. Avaliação da organização: a estratégia, as atividades, os meios e os recursos; o3. Avaliação da execução: o processo, a gestão; 4. A avaliação dos resultados: a eficácia dos mesmos.

nseqüências esperadas e inesperadas

Eficiência

 

 

A Avaliação da Definição do Programa

   Avaliação das necessidades

a) Colheita das informações

b) Identificação das necessidades

c) Seleção das necessidades

   Avaliação do contexto

   Avaliação da viabilidade

a) Viabilidade técnica

b) Viabilidade político social

c) Viabilidade financeira

d) Viabilidade da gestão

 

 

 

Avaliação da organização do programa

    Avaliação da estratégia

        forma sistemática de prover a realização de um objetivo ou à solução de um problema

    Avaliação da atividade

        os objetivos são um conjunto de atividades estruturadas e colocadas em seqüência lógica.

    A avaliação dos meios e recursos

        Recursos humanos: pessoal técnico, voluntário, dirigencial, especialistas;

        Recursos organizacionais: assinalação de funções, sistema de comunicação;

        Recursos materiais: ambientes, mobiliário etc.

        Recursos tecnológicos: métodos, técnicas e instrumentos à disposição da atividade administrativa e pedagógica;

        Recursos financeiros: origem, quantidade, disponibilidade;

        Recursos normativos: princípios, valores, crenças, normas internas.

 

 

A avaliação da execução do processo

   Avaliação do processo

       A definição das funções e das responsabilidades;

       A verificação das informações;

       O controle dos confins entre as funções;

       O controle dos procedimentos (como acontecem os diferentes passos para a consecução de uma atividade);

       O controle das atividades;

         As revisões periódicas do programa e dos seus setores.

   Avaliação da gestão

       Trata-se de avaliar a capacidade dos gestores de identificar os problemas e de saber diferenciar aqueles que são importantes daqueles menos importantes, de ordená-los hierarquicamente e de ativar as suas soluções.

Eficácia

Conseqüências esperadas e inesperadas

Avaliação dos resultados do Programa

   Os objetivos da avaliação dos resultados podem ser assim delineados:

       Analisar e quantificar os resultados obtidos no breve, médio e longa duração;

       Identificar quais resultados podem ser considerados como bons e quais podem ser considerados como negativos;

       Diagnosticar as causas do êxito ou do insucesso dos resultados;

       Formular propostas para a correção de rota;

       Informar os resultados obtidos para a comunidade e para a sociedade.

 

Eficácia

 

Avaliação dos resultados do Programa

     Alguns indicadores de avaliação dos resultados:

       A eficiência: a relação entre os meios (recursos, imputs empregados) e os resultados de breve duração (outputs);

       A relação entre tempo empregado e os resultados;

       A utilidade das ações, das estratégias e das atividades para a obtenção dos resultados;

       A identificação dos resultados (outputs, efeitos ou impactos) não previstos;

       As causas do êxito e do insucesso;

       Os fatores que incidem positivamente ou negativamente sobre os resultados;

       As opiniões dos clientes sobre a bondade dos resultados do programa;

       A relação entre programa e comunidade (território): participação, parcerias, intercâmbio, utilização de espaços;

       O grau de satisfação dos clientes que saíram do programa

 

 

 

 

 

 

 

 

 

 

 

 

Conseqüências esperadas e inesperadas

 

 

 

Avaliação dos resultados do Programa

o    A verificação de resultados de breve duração procura avaliar a eficiência das ações (e atividades) na produção dos resultados. Por exemplo, a analise do custo-benefício.

o    A verificação dos resultados de média duração procura avaliar a eficácia do programa em conseguir produzir efeitos sobre a comunidade (território).

o    A verificação dos resultados de longa duração procura avaliar a eficácia em conseguir produzir impactos sobre a sociedade