1

Des indicateurs de Des indicateurs de performance pertinents et performance pertinents et

adéquatsadéquats

Marthe Hurteau, UQAM

Gilles Raîche, UQAM

2

Plan de la présentation

Objectifs Distinction et définitions Des critères pertinents Des critères adéquats Les « apprentissages » tirés de

l’expérience

3

Objectifs

Présenter un processus d’élaboration d’indicateurs, expérimenté par des gens du milieu collégial;

Présenter certains enjeux méthodologiques;

Présenter certains « apprentissages» tirés de la mise en application du processus.

4

Des indicateurs pertinents…

…Parce qu’on sait: Pourquoi ils ont été retenus À quoi ils vont servir Pour qui ils vont servir…

5

Des indicateurs adéquats…

…Parce qu’ils: Mesurent ce qu’ils doivent mesurer Sont stables dans le temps Sont interprétables …

6

… Ce qui les rend ainsi UTILES!

7

Distinction / définitionsDistinction / définitions

8

Indicateurs: assurent le suivi du programme(système d’information)

Évaluation de programme:identifie les problèmes, porteun jugement et formule desrecommandations

Indicateurs de performance / Évaluation de programme

9

Les indicateurs de performance

Sont quantitatifs (chiffre brut - volume, moyenne, rapport - ratio, cote, index, taux, pourcentage)

Documentent les différentes composantes d’un programme (ressources, activités, résultats obtenus, etc.)

Considèrent l’efficacité comme primordiale

10

Offrent différents niveaux de surveillance :• Veille• Alerte

COMMENT?

11

Par les CIBLES!

Indiquent où on veut s’en aller par rapport à la performance, le niveau visé.

Par exemple : Au moins 60% de la clientèle obtient son diplôme

12

Des indicateurs Des indicateurs pertinentspertinents

13

Processus d’élaboration

1. Modèle logique

2. Enquête

3. Besoins d’information

5. Recherche

4. Informationcritique

6. Choix desIndicateurs

7. Établissement Des cibles

14

Indicateurs / critères

Rapport planification

/ services

Rapport planification

/ services

PlanificationPlanification

ServicesServices

= nombre de téléphones effectués pour placer les étudiants (ATE) = INDICATEUR

= nombre de stagiaires placés= INDICATEUR

= RENDEMENTRENDEMENT: n. de téléphones/ n. de stagiaires = CRITÈRE DE PERFORMANCE

15

Planification et organisation

Planification et organisation

RésultatsRésultatsActivités services

Activités services

BesoinsBesoins

ProblèmesProblèmes

Ress. humainesRess. humaines

Ress. matériellesRess. matérielles

Ress. monétairesRess. monétairesCoût/efficacitéCoût/efficacitéCoût/efficacitéCoût/efficacité

RendementRendementRendementRendement

Qualité du Qualité du serviceservice

Qualité du Qualité du serviceservice

SatisfactionSatisfactionDu clientDu client

SatisfactionSatisfactionDu clientDu client

EfficacitéEfficacitéEfficacitéEfficacité

ProductivitéProductivitéProductivitéProductivité

EfficienceEfficienceEfficienceEfficience

Charge de Charge de travailtravail

Charge de Charge de travailtravail

RESSOURCESRESSOURCES

16

Des indicateurs Des indicateurs adéquatsadéquats

17

Validité

Apparente

De contenu

De construit

Prédictive

De conséquences

18

Précision

Les indicateurs sont-ils fiables?

Obtiendrait-on les mêmes valeurs à un autre moment?

Sont-ils constants?

Une autre personne obtiendrait-elle les mêmes valeurs?

Peut-on obtenir un indicateur de la précision de chacun des indicateurs, ou du moins la documenter?

19

Documentation

Il faut bien documenter nos indicateurs :

Ce qu’ils signifient

Leurs limites

Le contexte de leur obtention

Etc.

20

Généralisation

Les valeurs obtenues sont:

Généralisables à…

d’autres années ou sessions

une population bien définie

Obtenues d’un échantillon représentatif d’une population

En fait, il faut bien circonscrire l’univers de généralisation

21

Signification

Les valeurs obtenues :

Sont interprétables

Permettent, le plus possible, un jugement absolue

Permettent d’assurer des comparaisons

Permettent des mesures équivalentes

Exemple de l’histoire du mètre

22

« Apprentissages »

23

Pourquoi on retient certains indicateurs Ce que l’on va faire avec À qui ils sont destinés Comment on va leur présenter

Démarche qui permet de savoir:

24

Les cibles: Soulèvent des résistances:

• Difficiles à établir –références-• Confusion entre standards et cibles• Les ressources ne suivent pas toujours

Processus pour les établir est aussi important que les cibles retenus

Les indicateurs doivent être peu nombreux mais « parlants »

25

Les intérêts diversifiés des différents auditoires cibles impliquent un triage plutôt que l’élimination de certains indicateurs

Importance d’élaborer un lexique pour documenter les indicateurs;

26

Critères Professeurs Directions

Conseils d’administration

Efficacité

Satisfaction

Qualité

Rendement

27

Finalement, ils s’avèrent très utiles dans le contexte des évaluations de programme