IMPORTANT LEGAL NOTICE - The information on this site is subject todisclaimercopyright notice
Evaluation
  EUROPA > Commission européenne > EuropeAid > Evaluation > Méthodologie > Bases méthodologiques > Comment
Last updated: 15/12/2005
EuropeAid

Bases méthodologiques
Processus d'évaluation (Comment ?)

EuropeAid
 

Assurance qualité




Méthodologie
• Guide d'évaluation
• Bases méthodologiques
• Outils d'évaluation
• Exemples
• Glossaire
• Sitemap

Méthodes
• Quoi
• Quand
• Pourquoi
• Qui
• Comment

Comment
• Vue d'ensemble
• Stratégie
• Questions
• Références
• Conception
• Collecte
d'information

• Analyse
• Jugement
• Assurance
qualité

 
 

Qu'est-ce que c'est ?

Il s'agit d'établir des points de contrôle de la qualité aux principales phases du processus, de définir les responsabilités de l'assurance qualité et d'établir les règles du jeu en cas de défaut de qualité.
L'assurance qualité est organisée à l'image d'une crémaillère : des éléments de qualité successifs sont sécurisés à chaque étape de façon à avancer sur des bases solides pour l'étape suivante.



Pourquoi s'en préoccuper ?

  • Pour renforcer les conclusions de l'évaluation aux yeux des utilisateurs en montrant qu'il s'agit d'un travail impartial et rigoureux, respectant les standards professionnels.
  • Pour construire la qualité progressivement et éviter de constater un défaut de qualité au stade du rapport final.
  • Pour clarifier les relations entre le responsable de l'évaluation, le groupe de référence et l'équipe d'évaluation externe.

En savoir plus



Règles du jeu

Les règles de l'assurance qualité sont précisées dans les termes de références et rappelées lors de l'engagement de l'équipe d'évaluation externe.

Les règles concernent :

  • L'approbation des documents
  • Les critères de qualité
  • La diffusion de l'appréciation de qualité du rapport final

Le processus d'assurance qualité bénéficie de la contribution de tous les acteurs tout en limitant les conflits potentiels qui pourraient survenir entre eux, par exemple:

  • Les acteurs qui détiennent les responsabilités dans l'intervention évaluée (les évalués) sont en bonne position pour apprécier la pertinence des données collectée et l'impartialité des interprétations. Leur appréciation peut cependant être sensible au biais de confirmation. Ils doivent donc avoir un rôle consultatif, par exemple au moyen de leur participation au groupe de référence.
  • Le leader de l'équipe d'évaluation externe a un rôle majeur pour assurer la qualité, particulièrement en concevant une méthode adéquate, et en s'assurant de la précision et de l'impartialité du rapport. Il risque toutefois de sur-valoriser les points de vue des parties prenantes influents, et spécialement celles susceptibles de lui commander d'autres évaluations à l'avenir. L'appréciation qualité du gestionnaire de l'évaluation contribue à prévenir ce risque.


Etapes clés

Rapport de démarrage

Au stade du rapport de démarrage, l'appréciation de la qualité permet de vérifier que l'équipe d'évaluation a clairement compris le champ et la finalité de l'évaluation, ainsi que la logique de l'intervention évaluée et les questions à traiter.

Rapport de première phase (desk)

Au stade du rapport de première phase (desk), l'appréciation de la qualité vérifie la qualité de l'analyse documentaire ainsi que l'adéquation de la méthode proposée pour la phase de terrain, y compris les indicateurs, les sources d'information et la démarche d'analyse.

Rapport final

Au stade du rapport final, l'appréciation de la qualité vérifie que l'évaluation apporte des réponses valides et impartiales aux questions posées, et que la forme du rapport est adaptée aux besoins des utilisateurs prévus.
A ce stade, le contrôle qualité porte d'abord sur la première version du rapport et ensuite sur la version finale.

Top

Acteurs clés

Il est attendu que tous les acteurs clés impliqués dans le processus d'assurance qualité aient une capacité d'évaluation suffisante, à l'exception des membres du groupe de référence. Dans le cas où un acteur clé n'est pas assez qualifié, il fait en sorte d'obtenir un appui approprié.

Leader de l'équipe d'évaluation

Le leader de l'équipe d'évaluation est impliqué en premier lieu dans la prévention des principaux risques menaçant la qualité, par exemple laisser de côté une question majeure, ne pas consulter une partie prenante importante, s'appuyer sur des données non fiables, juger de manière partiale.

Il assure également que chaque rapport est soumis à un contrôle qualité détaillé avant d'être remis au gestionnaire de l'évaluation.

Contrôleur(s) qualité

La société ou consortium en charge du contrat d'évaluation désigne un ou plusieurs contrôleur(s) qualité qui vérifient la soigneusement la qualité de chaque rapport avant leur livraison au gestionnaire de l'évaluation. Le(s) contrôleur(s) qualité doit être expérimenté en évaluation et ne pas appartenir à l'équipe d'évaluation.

Gestionnaire de l'évaluation

Le gestionnaire de l'évaluation a la responsabilité finale d'apprécier si la qualité méthodologique d'un rapport est suffisante ou non pour engager la prochaine étape.

Dans ce processus, il consulte les membres du groupe de référence, et se repose sur un appui technique autant que nécessaire.

Groupe de référence

Les membres du groupe de référence sont consultés pour tous les rapports dans leur version provisoire. Ils peuvent commenter les bases factuelles de l'évaluation, ce qui est une contribution à l'assurance qualité. Lorsque leurs commentaires portent sur la substance des conclusions, ils sont simplement transmis à l'équipe d'évaluation qui décide librement de les prendre en compte ou non.


Top