II-2-2-1 Construction des indicateurs28
Les critères d'évaluation retenus seront
mesurés grâce à un, ou des, indicateurs,
c'est-à-dire un signe qui permet d'apprécier, comparer une
réalisation par rapport à une autre, ou à des
périodes différentes ou par rapport à une norme. A partir
des différents critères choisis, en fonction du questionnement
évaluatif qui aura été rédigé, il convient
alors de rechercher des indicateurs simples, observables, autant que se faire
se peut "mesurables", qui permettent de rendre compte des résultats pour
chacun des critères.
28 Il y a autant d'indicateurs que de recherche, et
aucun indicateur ne ressort plus que les autres. En plus les typologies de
recherche sont propres à tout auteur. Suivant le contexte de la
recherche et l'utilité de l'évaluation l'auteur insiste plus sur
quelques indicateurs plus que les autres.
54
CRITÈRES
|
INDICATEURS
|
Pertinence (bien- fondé,
utilité, cohérence)
|
Mesure des dysfonctionnements du dispositif
Mesure de l'adéquation des objectifs / réponse
formation
Mesure de la contribution de la formation à
l'évolution et / ou à la performance du Trésor
Public
|
Efficacité
|
Nombre de participants aux formations Taux de
réalisation des actions planifiées Taux d'atteinte des objectifs
de formation
|
Efficience
|
Taux de respect du budget Effort de formation
|
Équité
|
Taux de répartition des participants aux formations
(genre, catégorie, emploi) Domaines de formation
|
Impact
|
Effet de la mise en oeuvre des nouvelles compétences
sur les apprenants et leurs services Contribution de la formation à la
performance du Trésor Public
|
Les résultats de la mise en oeuvre de ces indicateurs
seront évalués au moyen de calculs basés sur des
statistiques, des données et des rapports fournies par la DF, ainsi que
d'une enquête par questionnaire d'un échantillon constitué
de 55 correspondants formation (représentants toutes les
catégories de participants à des formations de tous types), qui a
abouti à une succincte analyse statistique élémentaire.
II-2-2-2 Questionnaire d'évaluation
« Le questionnement évaluatif doit permettre
de traduire les objectifs généraux de la demande
d'évaluation en éléments vérifiables, observables,
éventuellement mesurables »29. Il doit guider la
démarche d'évaluation en désignant des interrogations
prioritaires. Le questionnaire d'évaluation doit avoir trois dimensions
:
une dimension cognitive : la question permet d'apporter des
connaissances ;
une dimension normative : la question permet de porter un
jugement ;
une dimension instrumentale : la question permet
d'améliorer l'intervention évaluée.
A cet effet, Les questions d'enquête de cette
évaluation doivent être pensées en termes de «
Dans quelle mesure... ? »30. Elles devront surtout se
rattachées aux critères de l'évaluation (pertinence,
efficacité, efficience, équité, impact).
29 Alain MARAGNANI, Op. Cit. Page
44
30 Alain MARAGNANI - L'évaluation du projet
d'établissement - 13/12/2012 - page 4
55
Par exemple31:
Critères
|
Question évaluatifs
|
efficacité et/ou efficience
|
« Dans quelle mesure les réalisations au
niveau des différents axes du projet ont-elles été
efficaces (ou efficientes) ? »
« Dans quelle mesure la mise en oeuvre des
différents axes du projet d'établissement a-t-elle
été efficace ? »
|
Pertinence :
|
« Dans quelle mesure le suivi de la mise en oeuvre du
projet d'établissement a-t-il été pertinent au regard des
conditions de déroulement du projet ? des évolutions de la
situation ? ».
|
Impact
|
« Quels sont les facteurs exogènes identifiables
susceptibles d'avoir influencé les évolutions observées ?
»
|
La construction de notre questionnaire est fondée sur
une revue de la littérature notamment celle de JOUVENEL et MASINGUE
(1995) ainsi que sur des études empiriques réalisées en la
matière.
Toutefois et malgré l'importance de cette
méthode de collecte de données, il faut signaler qu'elle marque
ses limites dans la mesure où sa conception nécessite une
préparation lourde.
|