Des indicateurs de performance pertinents et ad

1
Des indicateurs de performance pertinents et
adéquats

• Marthe Hurteau, UQAM
• Gilles Raîche, UQAM

2
Plan de la présentation

• Objectifs
• Distinction et définitions
• Des critères pertinents
• Des critères adéquats
• Les  apprentissages  tirés de lexpérience

3
Objectifs

• Présenter un processus délaboration
  dindicateurs, expérimenté par des gens du milieu
  collégial
• Présenter certains enjeux méthodologiques
• Présenter certains  apprentissages tirés de la
  mise en application du processus.

4
Des indicateurs pertinents

• Parce quon sait
• Pourquoi ils ont été retenus
• À quoi ils vont servir
• Pour qui ils vont servir

5
Des indicateurs adéquats

• Parce quils
• Mesurent ce quils doivent mesurer
• Sont stables dans le temps
• Sont interprétables

6

• Ce qui les rend ainsi UTILES!

7

• Distinction / définitions

8
Indicateurs de performance / Évaluation de
programme
Indicateurs assurent le suivi du
programme (système dinformation)
Évaluation de programme identifie les problèmes,
porte un jugement et formule des recommandations
9
Les indicateurs de performance

• Sont quantitatifs (chiffre brut - volume,
  moyenne, rapport - ratio, cote, index, taux,
  pourcentage)
• Documentent les différentes composantes dun
  programme (ressources, activités, résultats
  obtenus, etc.)
• Considèrent lefficacité comme primordiale

10

• Offrent différents niveaux de surveillance
• Veille
• Alerte
• COMMENT?

11
Par les CIBLES!

• Indiquent où on veut sen aller par rapport à la
  performance, le niveau visé.
• Par exemple Au moins 60 de la clientèle
  obtient son diplôme

12

• Des indicateurs pertinents

13
Processus délaboration
2. Enquête
4. Information critique
6. Choix des Indicateurs
5. Recherche
1. Modèle logique
3. Besoins dinformation
7. Établissement Des cibles
14
Indicateurs / critères
nombre de téléphones effectués pour placer les
étudiants (ATE) INDICATEUR
Planification
Services
nombre de stagiaires placés INDICATEUR
Rapport planification / services
RENDEMENT n. de téléphones/ n. de stagiaires
CRITÈRE DE PERFORMANCE
15
Qualité du service
Satisfaction Du client
Résultats
Planification et organisation
Activités services
Besoins
Problèmes
Efficacité
Ress. humaines
Efficience
Ress. matérielles
Ress. monétaires
Coût/efficacité
Charge de travail
Productivité
Rendement
RESSOURCES
16

• Des indicateurs adéquats

17
Validité

• Apparente
• De contenu
• De construit
• Prédictive
• De conséquences

18
Précision

• Les indicateurs sont-ils fiables?
• Obtiendrait-on les mêmes valeurs à un autre
  moment?
• Sont-ils constants?
• Une autre personne obtiendrait-elle les mêmes
  valeurs?
• Peut-on obtenir un indicateur de la précision de
  chacun des indicateurs, ou du moins la documenter?

19
Documentation

• Il faut bien documenter nos indicateurs
• Ce quils signifient
• Leurs limites
• Le contexte de leur obtention
• Etc.

20
Généralisation

• Les valeurs obtenues sont
• Généralisables à
• dautres années ou sessions
• une population bien définie
• Obtenues dun échantillon représentatif dune
  population
• En fait, il faut bien circonscrire lunivers de
  généralisation

21
Signification

• Les valeurs obtenues
• Sont interprétables
• Permettent, le plus possible, un jugement absolue
• Permettent dassurer des comparaisons
• Permettent des mesures équivalentes
• Exemple de lhistoire du mètre

22

•  Apprentissages 

23

• Démarche qui permet de savoir

• Pourquoi on retient certains indicateurs
• Ce que lon va faire avec
• À qui ils sont destinés
• Comment on va leur présenter

24

• Les indicateurs doivent être peu nombreux mais
   parlants 

• Les cibles
• Soulèvent des résistances
• Difficiles à établir références-
• Confusion entre standards et cibles
• Les ressources ne suivent pas toujours
• Processus pour les établir est aussi important
  que les cibles retenus

25

• Importance délaborer un lexique pour documenter
  les indicateurs

• Les intérêts diversifiés des différents
  auditoires cibles impliquent un triage plutôt que
  lélimination de certains indicateurs

26
Critères Professeurs Directions Conseils dadministration
Efficacité ? ? ?
Satisfaction ? ?
Qualité ? ?
Rendement ? ?
27

• Finalement, ils savèrent très utiles dans le
  contexte des évaluations de programme