Download Évaluations des Opérations d'Urgence du HCR: Guide Pratique et Critères d'Évaluation and more Study Guides, Projects, Research Law in PDF only on Docsity!
Évaluations des opérations d’urgence
11 janvier 2024
Points clés
Conformément à la politique du HCR sur la préparation et la réponse aux situations d’urgence et à la politique d’évaluation du HCR, toutes les opérations d’urgence de niveau 3 (L3) doivent faire l’objet d’une évaluation au plus tard dans les 15 mois qui suivent l’opération Les situations d’urgence de niveaux 1 et 2 peuvent également faire l’objet d’une évaluation à la demande de l’équipe de hauts responsables, des bureaux régionaux ou des bureaux de pays, conformément aux dispositions de la politique d’évaluation
Dans la mesure du possible et afin de favoriser la synergie entre les équipes, des responsables du Service de l’évaluation se joindront aux personnes chargées de conduire une revue en temps réel
Les évaluations des situations d’urgence sont effectuées pour apprendre à mieux faire et parce que le HCR s’est engagé à rendre compte de son action. Elles permettent aux dirigeants et aux autres acteurs de prendre des décisions éclairées, de présenter les résultats aux parties prenantes et d’améliorer les stratégies, les plans, les programmes et les politiques Les rapports d’évaluation des opérations d’urgence sont publiés sur le site Web du Service de l’évaluation, ainsi que les réactions de la direction ; des rapports de suivi doivent être établis au bout de 12 et 24 mois.
1. Aperçu
1.1 Objectif
Le HCR fait sienne la définition par les Nations Unies de l’évaluation :
« Une évaluation a pour objet d’apprécier, de manière aussi systématique et impartiale que
possible, une activité, un projet, un programme, une stratégie, une politique, un sujet, un thème, un secteur, un domaine opérationnel ou une performance institutionnelle. Elle permet d’analyser le niveau de réussite, à la fois en termes de résultats escomptés et inattendus, en examinant la chaîne des résultats, les processus, les facteurs contextuels et le lien de causalité. Elle s’appuie pour cela sur des critères tels que la pertinence, l’efficacité, l’efficience, l’impact et la durabilité^1 .Une évaluation doit fournir, à partir d’éléments démontrables, des renseignements crédibles et utiles, qui permettent d’intégrer en temps voulu les conclusions, recommandations et enseignements dans le processus décisionnel des organisations et des parties prenantes. »
L’évaluation éclaire les choix faits à tous les niveaux de l’organisation en matière de planification stratégique, de programmation et de prise de décision, sur la base de données représentatives de la période considérée, crédibles et impartiales. Ces données rendent compte, directement et indirectement, les opinions et les points de vue des personnes relevant de la compétence du HCR et des communautés d’accueil sur les services de protection et d’assistance fournies par l’organisation.
Les évaluations des opérations d’urgence permettent d’analyser dans quelle mesure le HCR (dans son ensemble) apporte une réponse pertinente, efficace et en temps voulu à une crise humanitaire nationale ou régionale, en tenant compte des facteurs favorables et des contraintes complexes propres au pays ou à la région.
Les évaluations des opérations d’urgence visent quatre objectifs principaux :
Renforcer l’approche des opérations du HCR ainsi que la préparation de l’organisation aux situations d’urgence – en évaluant dans quelle mesure la stratégie nationale du HCR a répondu aux besoins les plus importants des réfugiés et des populations déplacées, a correspondu aux domaines de compétence et à la mission de l’organisation, et a pris en considération les capacités et les interventions des autres partenaires ; Améliorer les performances du HCR et les résultats obtenus pour les personnes relevant de sa compétence – en analysant les opérations, les partenariats, les résultats immédiats et les impacts potentiels à plus long terme des activités du HCR ; Aider le HCR à renforcer ses politiques, ses orientations, ses systèmes et son approche des liens entre action humanitaire et développement, afin de mieux répondre aux situations d’urgence – en tirant les leçons de l’ensemble des opérations du HCR ; Fournir au HCR des informations crédibles et objectives sur les performances de l’organisation, qui peuvent être utilisées pour offrir des garanties et rendre des comptes aux partenaires.
1.2 Principes directeurs et critères
L’évaluation au sein du HCR repose sur les principes fondamentaux d’impartialité, de crédibilité et d’utilité. Ces principes, qui sont liés et se renforcent mutuellement, recouvrent un certain nombre de valeurs spécifiques qui guident l’approche du HCR lorsqu’il initie une évaluation, lorsqu’il la met en œuvre et lorsqu’il en exploite les résultats.
Les évaluations, y compris les évaluations des opérations d’urgence, reposent sur le respect des genres, de l’équité et des droits de la personne, conformément aux valeurs, normes et orientations des Nations Unies. Le HCR s’appuie sur les critères du Comité d’aide au
processus d’évaluation. Ils doivent :
- Informer à l’avance toutes les parties concernées (collègues du HCR, organisations des Nations Unies et ONG partenaires, gouvernement, donateurs), présenter l’équipe d’évaluation, et expliquer que le personnel et les partenaires peuvent être sollicités pour des entretiens.
- Désigner un coordonnateur chargé des questions de fond, ainsi qu’un coordonnateur affecté à des tâches d’appui logistique et administratif.
- Mettre à la disposition de l’équipe d’évaluation des documents qui rendent compte des principaux développements de l’opération d’urgence, des décisions prises et des résultats obtenus. Aider l’équipe d’évaluation à organiser des entretiens avec les principales parties prenantes.
- S’assurer que les entretiens impliquent des personnes relevant de la compétence du HCR et qu’ils sont planifiés en intégrant des critères d’âge, de genre et de diversité (AGD). Il peut également être demandé au(x) représentant(s) et au(x) bureau(x) de pays de fournir un appui logistique (sous réserve de contraintes opérationnelles). Afin de préserver la crédibilité et l’objectivité de l’évaluation, le personnel du HCR ne peut participer à aucun des entretiens de l’équipe d’évaluation.
Tout au long du processus, le Service de l’évaluation du HCR mettra à disposition de l’équipe d’évaluation un ensemble de documents de référence et de données qui seront continuellement mis à jour.
2.2 Champ d’application de l’évaluation d’une opération d’urgence
La portée opérationnelle des évaluations des opérations d’urgence n’est pas figée ; le Service de l’évaluation en discutera avec l’(les) équipe(s) opérationnelle(s) de pays concernée(s), le(s) bureau(x) régional(régionaux) et le Siège. Rappelons toutefois que, dans la mesure où une opération d’urgence de niveau 3 déclenche une réponse de l’ensemble de l’organisation, la portée opérationnelle des évaluations doit inclure tous les niveaux de l’organisation.
La portée géographique doit correspondre à la portée opérationnelle. Elle peut se concentrer uniquement sur les zones de l’opération d’urgence ou sur l’ensemble du pays/de la région. La décision d’inclure ou non les programmes réguliers (sans lien direct avec la situation d’urgence) dans le champ d’application de l’évaluation peut être prise au cas par cas et sera précisée dans les termes de référence.
Tout ce qui précède s’applique également aux évaluations des opérations d’urgence de niveaux 1 et 2, bien que la durée et la portée opérationnelle soient plus limitées. Se référer à la politique du HCR sur la préparation et la réponse aux situations d’urgence pour connaître les principales caractéristiques des opérations de niveaux 1 et 2.
Dans certains cas, les évaluations des opérations d’urgence du HCR peuvent être complétées par des évaluations humanitaires interorganisations qui se concentrent, à l’échelle du système, sur les performances, les obstacles opérationnels et les réalisations.
3. Conseils principaux
3.1. Termes de référence/principaux domaines d’évaluation
Les critères d’évaluation du Comité d’aide au développement de l’OCDE sont les critères de référence pour l’évaluation de l’aide au développement et de l’aide humanitaire. Mis à jour en 2019, ces six critères sont l’efficacité, la pertinence, l’efficience, l’impact, la viabilité et la cohérence. Le guide 2006 d’ALNAP interprète ces critères et les applique à l’évaluation de l’action humanitaire en considérant les indicateurs suivants : efficacité, adéquation/pertinence, efficience, impact, couverture, cohérence et connexité.
Des critères supplémentaires peuvent inclure des thèmes transversaux, tels que la coordination, la redevabilité à l’égard des populations touchées, la prise en compte de l’âge, du genre et de la diversité. Le poids de chaque critère fera l’objet d’une discussion avec le responsable de l’évaluation du HCR au cours de la phase de démarrage.
Compte tenu des contraintes temporelles et opérationnelles, l’évaluation doit se concentrer sur les questions prioritaires qui peuvent contribuer à mettre en lumière l’étendue de la réponse du HCR et la nature de l’assistance humanitaire fournie. À titre indicatif, l’évaluation peut aborder les questions suivantes :
La stratégie du HCR s’est-elle adaptée à l’environnement extérieur, y compris à l’évolution du contexte et au rôle du gouvernement et des autres acteurs de l’aide humanitaire et du développement (Nations Unies, ONG, société civile et acteurs locaux)? Dans quelle mesure le HCR a-t-il donné suite aux recommandations de la revue en temps réel pour faire face à l’évolution de la crise? Compte tenu des ressources disponibles, dans quelle mesure le HCR a-t-il apporté une réponse adaptée aux besoins des populations les plus vulnérables? Quelle a été l’efficacité de sa stratégie de ciblage? Dans quelle mesure le HCR a-t-il atteint les cibles visées, obtenu les produits recherchés et contribué aux effets attendus? Y a-t-il des signes que la réponse de niveau 3 a pu avoir des effets inattendus ou négatifs? Dans quelle mesure la réponse a-t-elle été efficace et fournie en temps opportun, par exemple du point de vue de l’adaptation des processus opérationnels, des ressources humaines, de l’approvisionnement, du financement, de l’appui technique et d’autres aspects? Les responsabilités internes étaient-elles clairement définies? Dans quelle mesure les réussites et les échecs de la réponse sont-ils imputables à des facteurs systémiques? Quel rôle les principales entités du HCR (divisions, bureaux, Siège, équipes opérationnelles) ont-elles joué à cet égard?
Les recommandations portent généralement sur les points suivants :
Que faut-il faire de plus? Que faudrait-il faire différemment pour améliorer les programmes du HCR en faveur des réfugiés, des PDI et de leurs communautés? Quels enseignements le HCR peut-il tirer de ses efforts de préparation? Et quels enseignements peuvent être mis à profit au niveau régional et dans d’autres régions où le HCR mène des opérations? Comment le HCR peut-il adapter ses opérations d’urgence aux besoins de relèvement et de réintégration à plus long terme?
L’ensemble des supports de communication prévus pour l’évaluation (documents d’infographie, podcasts, etc.).
Calendrier indicatif de l’évaluation d’une opération d’urgence, à partir de la signature de l’accord avec le prestataire de services :
3.5. Réponse de la direction
Une réponse de la direction sera préparée dans les trois mois suivant la finalisation du rapport d’évaluation. Le bureau du Haut Commissaire assistant chargé des opérations est responsable de la coordination et de l’approbation de la réponse de la direction à l’évaluation d’une opération d’urgence de niveau 3, laquelle sera alimentée par les contributions des bureaux de pays, des bureaux régionaux et des divisions concernés, selon le cas, et sera utilisée pour le suivi, 12 et 24 mois plus tard, de la mise en œuvre des actions qui auront été arrêtées.
3.6. Groupe de référence du processus d’évaluation
Le responsable de l’évaluation et l’équipe d’évaluation bénéficieront du soutien d’un groupe de référence du processus d’évaluation, qui jouera un rôle consultatif et sera composé d’un panel représentatif des principaux utilisateurs des résultats de l’évaluation. Le groupe de référence comprend généralement plusieurs parties prenantes externes. Des représentants des personnes avec et pour lesquelles le HCR travaille doivent, dans la mesure du possible, faire partie du groupe de référence.
Ce groupe est chargé d’évaluer la qualité du travail d’évaluation et d’émettre des avis, notamment lors de réunions et d’ateliers spécifiques organisés au cours du processus d’évaluation. Le cadre de collaboration de l’équipe d’évaluation et du groupe de référence doit être défini (ainsi que la composition du groupe) au début de la phase de démarrage.
3.7. Publics concernés
Les principaux destinataires des conclusions et recommandations des évaluations des opérations d’urgence sont l’équipe de hauts responsables, la Division des urgences, de la sécurité et de l’approvisionnement (DESS), d’autres divisions concernées (DIP, DSPR, DRS, etc.), ainsi que des groupes sectoriels (groupe sectoriel mondial Protection, groupe sectoriel Coordination et gestion des camps, etc.), le directeur du bureau régional concerné et le(s) représentant(s) de pays.
Les publics secondaires comprennent les Nations Unies et les partenaires gouvernementaux, les donateurs, les populations cibles et les partenaires de mise en œuvre.
Évaluation des opérations d’urgence – Tâches de direction
Lorsque vous dirigez une opération d’urgence, prévoyez et prenez le temps d’effectuer
une revue en temps réel dans un délai de 3 mois et une évaluation dans un délai de
15 mois à compter du début de l’opération.
Désignez un coordonnateur au sein de l’équipe opérationnelle, qui travaillera aux côtés
du responsable de l’évaluation du Siège sur les questions de fond, ainsi qu’un
coordonnateur administratif pour les besoins logistiques.
Le premier de ces coordonnateurs est chargé de rassembler des documents, des
données et des informations liés au champ d’application convenu de l’évaluation.
Il doit en outre identifier les parties prenantes susceptibles de jouer le rôle
d’informateurs clés lors de la phase de collecte des données (visite de l’équipe
d’évaluation sur le terrain) et solliciter leur participation.
Veillez à ce que le personnel de l’équipe opérationnelle reçoive toutes les informations
nécessaires concernant le lancement officiel de l’évaluation, l’équipe d’évaluation, le
calendrier et les contributions attendues.
Assistez aux séances d’information et de compte-rendu avec l’équipe d’évaluation,
analysez le rapport provisoire et indiquez quelles recommandations sont
acceptées/partiellement acceptées ou rejetées, ainsi que les raisons de ces choix.
Rédigez la réponse de la direction sur le rapport, en précisant les mesures de suivi qu’il
a été convenu de mettre en œuvre.
Annexes
UNHCR Policy for Evaluation, 2022
Evaluation in UNHCR: A quick guide, 2018
