Title: volution
1- Évolution
- des modèles et des pratiques
- dappui à lévaluation
- Michel Demarteau
Observatoire de la santé du Hainaut
2Évolution des modèles et des pratiques dappui à
lévaluation
- I Théories et pratiques de lévaluation
- II Évolution du modèle dappui à lévaluation de
lAPES - III Évolution des modèles dappui à lévaluation
- IV Perspectives pour lappui à lévaluation en
promotion de la santé en Communauté Wallonie
Bruxelles
Demarteau 51122
3I Théories et pratiques de lévaluation
- Théoriser lévaluation parce que cest Qui nous
sommes (Shadish 1998) - Sil y a un effort de conceptualisation des
pratiques, il ny a pas encore de théorie
globale de lévaluation qui permette
didentifier les pratiques, de les comparer, de
les tester et de conduire à des consensus.
4I Théories et pratiques de lévaluation
- Un vocabulaire pour se parler évaluation
formative et sommative, usage instrumental et
conceptuel, imputabilité - Des enjeux à approfondir la distinction
qualitatif quantitatif qui est autant
épistémologique que méthodologique. - Des débats à mener justice sociale, politique
publique, utilisation - Une identité à construire la rencontre
spécifique de la connaissance, de la valeur et de
la décision. - Une image à fournir sur la capacité à répondre
aux besoins dun client .
5II Évolution du modèle APES
- Le premier modèle médiation entre recherche et
action - Une cellule de conseil en méthodologie et en
évaluation - pour améliorer la qualité des actions.
-
- Cette initiative sinspire du mouvement des
boutiques de sciences et de la recherche action.
Des difficultés sont identifiées. (Demarteau
1984) - Accueillir et comprendre les demandes du terrain.
- Répondre de manière interdisciplinaire.
- Construire un rapport égalitaire, contractuel.
- Gérer labsence de moyens dans un contexte
universitaire peu favorable. - Négocier lutilisation.
-
experts
acteurs
Apes
Demarteau 51122
6II Évolution du modèle APES
- Le second modèle accompagnement, la rencontre
entre expert de lévaluation et expert de
laction -
-
- Ce modèle sappuie sur une première rencontre
avec les théoriciens de lévaluation
(Stufflebeam, Fuley 1971) tout en conservant le
cadre initial du conseil en méthodologie.
(Demarteau 1991) - Lévaluateur de lAPES est un consultant.
Demarteau 51122
7II Évolution du modèle APES
- De nouveaux modèles lévaluation négociée
-
- Un cadre conceptuel se construit
- à partir dun questionnement et dune recherche
sur les pratiques - nourris par des modèles comme celui de
lévaluation centrée sur lutilisation (Patton
1980). - La grille APEP
- Lenjeu social de lévaluation
- Lenjeu stratégique de lévaluation
- Le modèle de lévaluation négociée
Demarteau 51122
8Les pratiques dévaluationLa grille
APEPDemarteau 1998
- Trois actions (ou composantes)
-
- Trois enjeux
Le processus de collecte dinformations
OBSERVER Le jugement sur la valeur dun objet
JUGER La décision en vue de
lutilisation AGIR
Un enjeu social Lexplicitation Un enjeu
stratégique Les acteurs Un enjeu technique Les
modalités (formalisation)
Un cadre de référence pour lévaluation Chantal
Vandoorne Juin 2003 - APES-ULG
9Un enjeu social passer de limplicite à
lexplicite
- Les trois composantes de lévaluation sont
toujours présentes. - Lénonciation de lune ou lautre des composantes
est significative de la fonction sociale que lon
donne à lévaluation - Seule lénonciation permet de faire de
lévaluation un objet de négociation
Un cadre de référence pour lévaluation Chantal
Vandoorne Juin 2003 - APES-ULG
10Un enjeu stratégique lappropriation de
lévaluation
- Lutilité sociale dune évaluation
- dépend des conditions dappropriation
- de cette évaluation par les acteurs
- Lenjeu social et lenjeu stratégique
- sont intimement liés
Un cadre de référence pour lévaluation Chantal
Vandoorne Juin 2003 - APES-ULG
11Éléments à éclaircir et à négocier avec les
acteurs
Un cadre méthodologique pour concevoir une
évaluation négociée
- Buts (finalités) de lévaluation
Questions des acteurs
Contexte
Objets et critères dévaluation
Indicateurs et outils (comment ?)
Structure
Objectifs et activités du programme et des
acteurs
C.VANDOORNE, S. GRIGNARD APES-Ulg PARIS Mars
2005
12III Évolution des modèles dappui à lévaluation
- Quelques repères historiques
- 19ème linspection sur des normes de
fonctionnement - Début 20ème lévaluation de résultats par des
outils quantitatifs - 1930 lévaluation par rapport à des objectifs
fixés (Tyler) - 1970 lévaluation en fonction de décisions à
prendre (Stufflebeam) - 1980 lévaluation en fonction des acteurs et de
leurs enjeux (Patton) - Depuis, de nombreux modèles dévaluation basés
sur la collaboration et la participation.
13III Évolution des modèles dappui à lévaluation
Empowerment Évaluation (Fetterman 2001)
Médiation
Négociation
Accompagnement
Demarteau 51122
14III Évolution des modèles dappui à lévaluation
- Empowerment Évaluation (Fetterman 2001)
- Des racines
- Psychologie communautaire (Rappaport 1987,
Zimmerman 1988) - Anthropologie Évaluation collaborative et
participative Recherche action - Une définition
- Lutilisation des concepts, des techniques et
des découvertes de lévaluation pour nourrir le
développement et lauto-détermination. - Une démarche en trois étapes
- Définir la mission exprimer, débattre,
synthétiser - Faire linventaire des activités lister,
sélectionner, donner une note, débattre - Planifier le futur fixer des buts, des
stratégies et la façon de les documenter. - Des stades dévolution
- Former Faciliter Défendre Éclairer Libérer.
- Des conditions
- Un processus démocratique Une communauté
dapprenants
15III Évolution des modèles dappui à lévaluation
- DIFFUSION
- Des sociétés savantes
- 1993, lassociation américaine dévaluation
- 1998, la société canadienne dévaluation
- 2002, la société australienne dévaluation
- 2004, la société européenne dévaluation
- Des gouvernements
- Santé Canada pour lévaluation de projet.
- Des fondations privées
- Une fondation privée américaine finançant des
services de santé communautaire, déducation, de
développement rural. - Des organisations internationales
- OXFAM, la Division des services de supervision
du Fonds des Nations Unies pour la population,
lOCDE - Laction sociale et communautaire
- Par exemple évaluation du travail de rue au
Québec.
Demarteau 51122
16IV Perspectives
- Développer lappui à lévaluation en Communauté
Wallonie Bruxelles - Lévaluation interne accompagnée est formatrice.
- Avec cette évaluation, nous pouvons apprendre et
développer nos capacités au niveau de projets,
dorganisations ou de politiques. - Cest une approche que nous pratiquons depuis 25
ans en Communauté Wallonie Bruxelles. - Nous devons cependant la maintenir et la
développer. - Maintenir, car elle a un coût.
- Développer, car nous pouvons faire plus et mieux
-
17IV Perspectives
- Faire plus et mieux
- Réaliser lévaluation du plan communautaire
opérationnel dans cette direction ? - Engager les associations et les administrations
dans un processus dapprentissage collectif en
travaillant, par exemple, sur la qualité des
rapports dactivité ? - Amplifier loffre dappui à lévaluation en
rassemblant les compétences en évaluation
participative avec dautres acteurs de laction
sociale ? - En souhaitant que lAPES continue à y contribuer
encore pour 25 ans par laction, la formation,
mais aussi la recherche et la théorisation.