Rémi Bachelet, profile picture
Téléchargé parRémi Bachelet
PPTX, PDF3,063 vues

Projet evaluation impact

Le document présente une formation sur l'évaluation des projets, animée par Dr. Rémi Bachelet, avec des objectifs d'apprentissage tels que l'établissement de termes de référence et l'évaluation d'impact à l'aide d'indicateurs. Il décrit également le cycle des opérations dans la gestion de projet et les fondamentaux de l'évaluation, notamment les différences entre résultats, effets et impact. Enfin, il souligne l'importance des termes de référence et du suivi dans le processus d'évaluation des projets.

Intégrer la présentation

Téléchargé 92 fois
1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations L'évaluation des projets Source cc-by-SA : Wikimédia Commons
2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Avant de commencer Confort de lecture ? • 1080p/haute définition, sous-titres • mettre la vidéo en mode « plein écran » • mettre en pause, varier la vitesse youtube.com/html5 gestiondeprojet.pm • originaux des diapositives, vidéos HD, sous- titres.. • quiz, prise de notes partagée, ressources... • MOOC GdP :  forum, réseaux sociaux  certification de réussite
3 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Cours sous licence Creative Commons • Paternité : citer l’auteur Partage : sous licence identique • Pas d’utilisation commerciale – Gratuit pour un usage personnel ou dans un cadre bénévole – Entreprise ou cursus universitaire : Demander l’autorisation • Votre organisation a-t-elle les droits ? => http://goo.gl/s2yRtv • RH ou formateur : Faire une demande d’utilisation => http://goo.gl/2uGj8s Images : cc-by source
4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Objectifs Au terme de cette formation, vous devez pouvoir : 1. Établir des termes de référence 2. Évaluer un projet : – Connaître les « bonnes pratiques » – Des exemples, tirés de projets/organisations sont signalés 3. Construire et mettre en œuvre des indicateurs d’impact 4. Comprendre et partager des concepts-clés (Présentés sur la page suivante) Lightbulb Jon Phillips public-domain-photos .
5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Vocabulaire de l’évaluation Finalité Moyens Restitution Termes de référence critères Objectifs/Résultats buts suivi-capitalisation Effets Impact prévu/réel Objectifs Situation de départ Indicateurs .
6 Dr. Rémi Bachelet Maître de conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Le cycle des opérations Programmation Formulation Identification Mise en œuvre Livraison Cadre logique, Termes de référence Etude de montage Rapports d’avancement Décision de continuer ou de réorienter le projet (évaluations intermédiaires) Domaines prioritaires, Objectifs globaux Plan Stratégique Décision sur la manière d’utiliser les résultats dans les projets futurs Rapport d’évaluation Adapté de : http://democratie.francophonie.org/IMG/ppt/Gestion_cycle_de_projet_et_cadre_logique.ppt Décision de financement Lancement.
7 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
8  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Fondamentaux de l’évaluation Source cc-by-SA : Wikimédia Commons
9  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Action Résultats Impact .
10  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Définitions Résultats = changements produits directement par l’action – A comparer avec les objectifs formalisés avant le lancement du projet. Effets = incidences directes et indirectes de l’action – Résultats de l’action mais aussi d'autres dynamiques / contraintes provenant du milieu (physique et humain). – Les effets peuvent être anticipés, mais avec une marge d’incertitude = p.e. objectifs propres des populations . Impact = changement à la suite de l’action – Prévoir l’impact présente encore plus de difficultés, car de nombreux facteurs extérieurs au projet. – Le temps est également un facteur, car l'impact se juge à terme .
11  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
12  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'évaluation des résultats Au vu des objectifs initiaux de l’action, comparer : – les objectifs définis – .. et les résultats atteints Deux visions : – quantitative : écart chiffré entre le prévu et le réalisé (p.e. 3 puits construits au lieu de 4) – qualitative : différence de nature entre le prévu / réalisé (p.e. un forage au lieu d’un puit) .
13  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage Réduire le travail des femmes Diminution des temps d’attente aux puits Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
14  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
15  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'évaluation des effets L’évaluation des effets porte sur l’interaction entre l’action et l’environnement du projet. – Le public concerné par les effets est plus large que le public-cible de l’action – Les stratégies menées par les personnes et les populations sont souvent difficiles à prévoir – D’autres actions ont pu interférer – … .
16  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage La population continue de puiser l’eau au marigot sauf en saison sèche Réduire le travail des femmes Diminution des temps d’attente aux puits Le temps libéré permet des activités productives : culture, tissage… Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Les villageois stockent l’eau dans des récipients contaminés par l’eau du marigot Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
17  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
18  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L’appréciation de l’impact L'impact d'un projet est l’ensemble des changements …significatifs …durables positifs et négatifs prévus et imprévus sur les personnes, les groupes et leur environnement … ayant un lien de causalité avec l’action .
19  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage La population continue de puiser l’eau au marigot sauf en saison sèche L’action n’a pas amélioré la situation sanitaire des populations. (Pourtant les résultats correspondent aux objectifs des actions) Par contre, les nouvelles activités productives des femmes produisent des revenus, dont une partie sert à améliorer la santé. Réduire le travail des femmes Diminution des temps d’attente aux puits Le temps libéré permet des activités productives : culture, tissage… Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Les villageois stockent l’eau dans des récipients contaminés par l’eau du marigot Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
20  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Il est difficile d’anticiper l’impact • Impact technique : – attendu : des villageois autonomes et formés pour l’entretien ; – inattendu : création d’entreprises de réparation des puits dans la zone. • Impact économique : – attendu : la caisse villageoise est alimentée par le paiement de l’eau ; – inattendu : la caisse permet le création d’emplois dans les entreprises d’entretien des puits. • Impact social : – attendu : les enfants du village sont en meilleure santé ; – inattendu : les enfants libérés de la corvée d’eau peuvent aller à l’école. • Impact financier : – attendu : constitution d’une caisse pour l’entretien de chaque puits ; – inattendu : l’argent d’une caisse est détourné • Impact organisationnel : – attendu : constitution des comités de gestion ; – inattendu : certains comités de gestion des puits conduisent d’autres action, p.e gèrent un potager pour l’école. Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
21  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Anticiper l’impact Quels sont les enjeux, acteurs et parties prenantes du projet ? – Dirigeants, chefs, élus.. – Groupes et associations, – Fonctionnaires et agents de tutelle, – Financeur, bailleurs de fonds – Entreprise, opérateurs économiques, – etc… .. analyser leurs zones d'incertitudes et anticiper leurs stratégies (voir cours d’analyse stratégique des projets) .
22  Définitions  Objectifs et résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact . Synthèse : retour sur les points fondamentaux . . .
23 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
24  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Le processus d’évaluation Photos © www.ifadem.org
25  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Les termes de référence • Établis au début du projet. – Ils permettent de délimiter l’évaluation, d’en préciser les objectifs • Qu’est-ce que l’on cherchera à savoir sur une action : impacts attendus, moyens de les mesurer… • Être clair sur ce que le commanditaire attend de l’évaluation • Questions : 1. Contexte ? Acteurs, milieu, antériorité 2. Qu’est-ce qu’il faut évaluer ? Questions évaluatives, Critères 3. Impact attendu ? Indicateurs, méthodologie d’évaluation ? 4. Restitution des résultats : à qui, comment ? 5. Moyens : budget, étapes du déroulement ? – Guides méthodologique F3E, Daniel NEU • Préparer les termes de référence • La préparation collective des termes de référence d’une évaluation .
26  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Le suivi – évaluation Action Résultats Impact situation de départ Evaluation intermédiaire Evaluation finale Evaluation ex-post Procéder régulièrement à des évaluations : les jalons et réunions de suivi du projet : • Elles peuvent être des auto-évaluations, évaluations externes/audits, etc… ou êtres faites pendant des réunions du projet. • On peut évaluer les effets, mais aussi le dispositif lui-même (implication des acteurs..). .
27  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Le suivi-capitalisation Collecter et analyser régulièrement “l’information utile à l’action”. – Prendre le temps d’observer = écoute et distanciation. – S’informer sur les autres actions en cours sur la zone. – Noter, conserver par écrit les éléments repérés Impact Action Capitalisation .
28  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Lors d’une formation animée par Centrale Lille dans un Campus numérique francophone de l’AUF pour créer un MOOC. A la même question “Que faites-vous ?” – Le 1er enseignant dira : j’apprends à me servir d’une plateforme de formation à distance – Le second répondra : je me forme à de nouvelles méthodes pédagogiques – Le 3ème : avec le MOOC je donnerai accès à l’enseignement supérieur à tous, pas uniquement mes étudiants habituels – Le 4ème : je contribue à réduire la fracture numérique entre le Sud et le Nord .
29  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille • Se servir d’une plateforme de formation est le moyen. • Se former à de nouvelles méthodes pédagogiques est l’objectif. • Donner accès à un public nouveau est le but. • Réduire la fracture numérique est la finalité. .
30  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille • La finalité : c’est l’idéal vers lequel on tend. La finalité fait référence à des valeurs : – la dignité, la liberté, l’égalité, etc. • Le but : c’est la matérialisation de la finalité que l’on se donne = l’impact attendu. – Le but est concret, mais il n’est pas accessible immédiatement. • L’objectif : c’est le résultat attendu d’une action. Atteindre les objectifs doit produire des résultats. – Les objectifs sont ordonnés dans le temps et dans l’espace : on parle alors d’objectifs principaux, de sous-objectifs, etc. • Les moyens sont les financements, compétences, outils et méthodes pour atteindre les objectifs. – Il est indispensable de mobiliser des moyens et des ressources .
31  Termes de référence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Synthèse : le processus d’évaluation . • Termes de référence • Suivi • Moyens, objectifs, buts et finalité . .
32 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
33 IFADEM Initiative francophone pour la formation à distance des maîtres
34 IFADEM : le projet 1er regroupement 2 jours Autoformation tutorée 6 mois 2e regroupement 2 jours Autoformation tutorée 6 mois 3ème regroupement 3 jours Evaluation des enseignants / Evaluation du dispositif Parcours de 350 heures de formation Cas IFADEM développé par Marion Alcaraz, AUF
35 La convention IFADEM-Burundi Parties prenantes • AUF • OIF • Ministère de l’enseignement Budget • 1,4M€ AFD • 400.000€ AUF/OIF dont valorisation personnels et locaux Cadre logique (pour en savoir plus) • Objectifs • Activités • Moyens • Résultats attendus • Risques encourus • Moyens pour surmonter les risques (mitigation) • Indicateurs
36 Les deux évaluations finales Evaluation externe • Respects des procédures • Bonne gestion des financements Audit financier Termes de référence…
37 Termes de référence - le contexte Contexte de l’évaluation • Pays • Système éducatif • Formation des maîtres • IFADEM Présentation du projet IFADEM-Burundi • Cadre conventionnel • Organisation / acteurs • Calendrier • Activités menées • Réalisations • Budgets • Etc.
38 Termes de référence - Les objectifs Objectifs quantitatifs • Former 1800 instituteurs • Développer 7 livrets de formation • Créer 4 Espaces numériques • Former une centaine de formateurs de formateurs Objectifs qualitatifs • Améliorer les compétences professionnelles des enseignants du primaire • Tester et valider une stratégie nationale de formation continue
39 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Exemples de projets et de leur impact 4. Construire des indicateurs 5. Suivre et valoriser une évaluation
40  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Construire des indicateurs Photos © www.ifadem.org
41  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Que sont des indicateurs d’impact ? Ce sont des signes vérifiables et mesurables qui, – par comparaison à une référence, – permettent de porter une appréciation … on les met au point à partir de l'impact anticipé du projet .
42  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'impact attendu permet de trouver des indicateurs Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL indicateur indicateur.
43 Impact attendu pour IFADEM Connaissances professionnelles • « connaitre les étapes d’une leçon » • .. Pratiques de classe • « travail en groupes » • … Observer des séances de classe – Lire des rapports d’évaluations de systèmes éducatifs Cas IFADEM développé par Marion Alcaraz, AUF Impact attendu : Amélioration des compétences 1. Théoriques 2. Pratiques des enseignants Indicateurs Effets
44 Questionnaire « Connaissances professionnelles » Grille d’observation « séances de classe » Mesure des indicateurs Indicateurs : • Connaissances professionnelles • Pratiques de classe Voir cours Méthodes de recueil de données Les entretiens, conception de questionnaires, observation directe …
45 QCM sur les connaissances professionnelles • 20% des enseignants interrogés connaissent les étapes d’une leçon de compréhension orale • …. • Moyenne de 23,7/45 Observation de séances de classe • 13% des enseignants acceptent que leurs élèves utilisent des tournures « français oral » • 44% des enseignants font travailler leurs élèves en groupes • … Situation de départ Situation de départ = Recueil des données au démarrage du projet
46  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Démarche déductive Indicateurs Impact attendu situation de départ .
47 Action Résultats Impact situation de départ Evaluation ex-post
48  Même méthodologie Utilisation des indicateurs Situation finale Evaluation ex-post Recueil des données après la fin du projet
49  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Indicateurs Situation finale « terrain » IMPACT REEL Démarche inductive .
50 Évolution des résultats ? Les enseignants qui avaient obtenu les moins bons résultats à l’entrée sont- ils ceux qui ont le plus évolué ? DynamiquesEcarts Situation de départ Entrée des enseignants en formation. Evaluation ex-post Sortie de formation pour les enseignants IMPACT Quel impact ? INDICATEURS
51  L'impact attendu  Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Synthèse : indicateurs et impact . . . . • L'impact attendu • Indicateurs • Impact
52 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Suivre et valoriser une évaluation
53  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Suivre et valoriser une évaluation Photos © www.ifadem.org
54  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Les critères • Les “angles de vue” grâce auxquels on porte une jugement. • Les critères les plus courants sont : 1. l’efficacité : compare les résultats aux objectifs prévus (en quantité et en qualité), 2. l’efficience : compare les résultats avec les ressources utilisées (moyens humains et matériels), 3. la pérennité : l’action est durable/soutenable (elle se poursuit de manière autonome sans appui extérieur), – La méthodologie de mise en œuvre des critères est également développée dans la vidéo formation au brainstorming. – D’autres critères peuvent être utilisés : participation, environnement, cohérence avec d’autres projets, etc… .
55  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille IFADEM : Les critères Pertinence Efficacité Efficience Viabilité/ durabilité • Bien-fondé des activités menées au regard du contexte – cohérence interne et cohérence externe. • Degré d’atteinte des objectifs - taux de réalisation du projet. • Rapport activités / moyens – étude des coûts • Capacités des bénéficiaires à pérenniser les actions menées .
56  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À quoi sert l’évaluation ? (1/2) • Contrôler – … si ce qui a été prévu a été réalisé, vérifier comment le financement a été utilisé • S’améliorer – Faire mieux la prochaine fois • Piloter – Indique ce qui a marché ou pas, de ne pas refaire les mêmes erreurs, régulation en cours de projet • Capitaliser – Mémoriser l’expérience, la transformer en savoir partageable .
57  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À quoi sert l’évaluation ? (2/2) • Former – Si l’évaluation est participative, elle permet aux acteurs de progresser • Communiquer – Sur les actions, leur résultat, leur impact • Faire participer – Si les termes de référence sont construits et négociés avec toutes les parties prenantes • Mais aussi … – Mesurer, réfléchir avant d’agir, connaître ses faiblesses, motiver.. .
58  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À votre avis, qu’est-ce qui fait qu’une évaluation marche bien ou mal ? Selon : – La volonté de progresser • Désir de changement ? Craintes ? – L’équipe-projet • Ouverte ? Stabilisée ? – Les convergences d’intérêts des acteurs • Concertation ? Négociation ? – Le type de management • Autoritaire /vertical ? Collaboratif/horizontal ? – L’importance accordée à l’évaluation • Durée ? Moyens financiers et humains ? Temps de restitution ? – Ce qui se passe après l’évaluation • Des moyens pour appliquer les conclusions, une valorisation, une corvée ? .
59 Les résultats de l’évaluation http://www.ifadem.org « L’évaluation de la 2e phase IFADEM a permis de mettre en évidence la nature de la performance de l’action de formation continue (…) Ce rapport montre les potentialités du système en cours de construction par le ministère et les différentes parties prenantes ; il souligne aussi certaines conditions qui déterminent la viabilité d’un plan stratégique de formation continue dans les cinq années à venir. »
60  Les critères  À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille . Synthèse : Suivre et valoriser • Les critères • À quoi sert l’évaluation ? – Contrôler, s’améliorer, piloter, capitaliser, former, communiquer, faire participer…. • Bonnes pratiques – La volonté de progresser – L’équipe-projet – Les convergences d’intérêts – Le management – L’importance accordée à l’évaluation – Ce qui se passe après l’évaluation . .
61 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Merci de votre attention ! Pour approfondir – Guides et outils F3E : http://f3e.asso.fr – Économie de l’évaluation : Analyse coût-bénéfice – L’évaluation d’un site internet : Web analytics – Méthodes de recueil et d’analyse de données

Contenu connexe

PPTX
Les tableaux de bord & les indicateurs de performance
parAhmed Mesellem
 
PPTX
Gestion de projet
parPascal Thery Formations
 
PPT
Gestion de projet
parEchecs et Stratégie
 
PPTX
Atelier note de cadrage
parChef De Projet Détendu
 
PPTX
presentation PFE
parMaha BOUALLEGUI
 
PPTX
Initiation à la gestion de projet
parSamer EL SAWDA, Ph.D.
 
PPTX
Introduction gestion de projet
parMohamed Amine BOURHIL
 
PPTX
La gestion de projets informatiques
parLoïc Charpentier
 
Les tableaux de bord & les indicateurs de performance
parAhmed Mesellem
 
Gestion de projet
parPascal Thery Formations
 
Gestion de projet
parEchecs et Stratégie
 
Atelier note de cadrage
parChef De Projet Détendu
 
presentation PFE
parMaha BOUALLEGUI
 
Initiation à la gestion de projet
parSamer EL SAWDA, Ph.D.
 
Introduction gestion de projet
parMohamed Amine BOURHIL
 
La gestion de projets informatiques
parLoïc Charpentier
 

Tendances

PPTX
Le management de la qualité totale
parChoayb Hamimeche
 
PPTX
Comment réussir sa soutenance pfe
parMohamed Sahbi
 
PPT
Cours et TP Ms Project
parhindif
 
PPT
Systeme management qualite
parnoisette7777
 
PDF
Exo pert
parKawtar Salhi
 
PPTX
METHODES DE PERT ET GANT
parBaraateEchchouyakh
 
PPTX
Etude de faisabilité et analyse de l'existant
parClément Dussarps
 
PPT
Cours management de projet
parKoffi KONAN
 
PPT
Les fondamentaux du Management de Projet
parCommunauté d'agglomération du Pays de Grasse
 
PPT
Gestion de projet
parEchecs et Stratégie
 
PDF
Management de la qualité
paryounes elhaiba
 
PPTX
GP Chapitre 4 : La planification de production
paribtissam el hassani
 
PDF
Les 4 phases du management de projet
parAntonin GAUNAND
 
PDF
10 minutes : Tableaux de bord
parConverteo
 
DOC
296 pages management support cours gestion projet + exercices + outils + arti...
parOlivier Coulibaly
 
DOC
Schema etude-de-projet
parFatima Abboud
 
PPTX
Gestion de Projets
parSaid Sadik
 
PPT
Les différentes phases d’un projet - La phase de planification
parCommunauté d'agglomération du Pays de Grasse
 
PPTX
Ingenierie de formation
parsafaejoubi
 
PPT
Les différentes phases d’un projet - La phase d’initialisation
parCommunauté d'agglomération du Pays de Grasse
 
Le management de la qualité totale
parChoayb Hamimeche
 
Comment réussir sa soutenance pfe
parMohamed Sahbi
 
Cours et TP Ms Project
parhindif
 
Systeme management qualite
parnoisette7777
 
Exo pert
parKawtar Salhi
 
METHODES DE PERT ET GANT
parBaraateEchchouyakh
 
Etude de faisabilité et analyse de l'existant
parClément Dussarps
 
Cours management de projet
parKoffi KONAN
 
Les fondamentaux du Management de Projet
parCommunauté d'agglomération du Pays de Grasse
 
Gestion de projet
parEchecs et Stratégie
 
Management de la qualité
paryounes elhaiba
 
GP Chapitre 4 : La planification de production
paribtissam el hassani
 
Les 4 phases du management de projet
parAntonin GAUNAND
 
10 minutes : Tableaux de bord
parConverteo
 
296 pages management support cours gestion projet + exercices + outils + arti...
parOlivier Coulibaly
 
Schema etude-de-projet
parFatima Abboud
 
Gestion de Projets
parSaid Sadik
 
Les différentes phases d’un projet - La phase de planification
parCommunauté d'agglomération du Pays de Grasse
 
Ingenierie de formation
parsafaejoubi
 
Les différentes phases d’un projet - La phase d’initialisation
parCommunauté d'agglomération du Pays de Grasse
 

En vedette

PPTX
Evaluation d'impact d'un projet
parRémi Bachelet
 
PDF
Guide d’étude d'impacts
parsmemanager
 
PPT
Evaluation du projet - Indicateurs
parPhilippe Cazeneuve
 
PPTX
Projet evaluation impact - solution du chapitre 2
parRémi Bachelet
 
PPTX
Projet evaluation impact - solution du chapitre 3
parRémi Bachelet
 
PPTX
Formation evaluation v4
parCatherine Snyers
 
PPTX
Presentation pfe
parRiadh K.
 
PPTX
Projet evaluation impact - solution du chapitre 1
parRémi Bachelet
 
PPTX
L’économie collaborative à l’assaut du tourisme : atout ou concurrence ?
parfrancoquebecetourisme
 
PPTX
Projet evaluation impact - solution du chapitre 4
parRémi Bachelet
 
PPT
Principes fondamentaux de l'économie et de la gestion (PFEG) – Programme offi...
parSuper Professeur
 
PPT
Etude d impact sur l environnement
parjabbouriyassir01
 
PDF
Etude impact pmc
parrue89strasbourg
 
PPTX
La Norme Iso 14001
parguest841acb
 
PDF
[MOOC GdP] Spécialisations GdP9
parBich Van Hoang
 
PPTX
Ma présentation PFE : Application Android & Site Web
parHarrathi Mohamed
 
PPTX
Diapo PFE
parbhar amenallah
 
PPTX
Présentation de mon PFE
parNadir Haouari
 
PDF
Rapport De PFE
parNadir Haouari
 
PDF
Les indicateurs de suivi et d'évaluation de la politique de population au mar...
parCrazzy Happynnes
 
Evaluation d'impact d'un projet
parRémi Bachelet
 
Guide d’étude d'impacts
parsmemanager
 
Evaluation du projet - Indicateurs
parPhilippe Cazeneuve
 
Projet evaluation impact - solution du chapitre 2
parRémi Bachelet
 
Projet evaluation impact - solution du chapitre 3
parRémi Bachelet
 
Formation evaluation v4
parCatherine Snyers
 
Presentation pfe
parRiadh K.
 
Projet evaluation impact - solution du chapitre 1
parRémi Bachelet
 
L’économie collaborative à l’assaut du tourisme : atout ou concurrence ?
parfrancoquebecetourisme
 
Projet evaluation impact - solution du chapitre 4
parRémi Bachelet
 
Principes fondamentaux de l'économie et de la gestion (PFEG) – Programme offi...
parSuper Professeur
 
Etude d impact sur l environnement
parjabbouriyassir01
 
Etude impact pmc
parrue89strasbourg
 
La Norme Iso 14001
parguest841acb
 
[MOOC GdP] Spécialisations GdP9
parBich Van Hoang
 
Ma présentation PFE : Application Android & Site Web
parHarrathi Mohamed
 
Diapo PFE
parbhar amenallah
 
Présentation de mon PFE
parNadir Haouari
 
Rapport De PFE
parNadir Haouari
 
Les indicateurs de suivi et d'évaluation de la politique de population au mar...
parCrazzy Happynnes
 

Similaire à Projet evaluation impact

PPTX
Projet evaluation impact
parRémi Bachelet
 
PPTX
Projet outils basiques version 2014
parRémi Bachelet
 
PPTX
Gestion des risques Démarche
parRémi Bachelet
 
PPTX
projet outils basiques version 2013
parRémi Bachelet
 
PPTX
Week 3_103500.pptxmjhabahsisnzxhowuebsjs
parSamuelJourdain
 
PPTX
L'impact ta priorité
parEnactusFrance
 
PDF
Eie livre complete opt
parSitrakiniaina Hasinjatovo
 
PPTX
Pourquoi et comment Mesurer son impact ?
parEnactusFrance
 
PPT
1-4-_CL_et_composhhhhhhhhhhhhhhantes.ppt
parmrjamalamadid
 
PPTX
Mesure de l'impact social
parNicolas VanNuffel
 
PPT
Final outline plan for webinar evaluation and impact assessment mof 2004 ...
parEricaPackingtonIOD
 
PDF
Approche cadre-logique
paryoussefCASA
 
PDF
cours gestion des projets et programmes humanitaire
paramidoudiarra2
 
PDF
2008-11-04 Jean-Gynse Bolivar Cadre logique comme outil de gestion
parPMI Lévis-Québec
 
PDF
Projet les fondamentaux
parMohamed DAHANI
 
DOCX
amaghoss.docx
parAnassChokeir
 
PPT
cours environnement minier.ppt tujj gjh vbvb
paralassanesow12177
 
Projet evaluation impact
parRémi Bachelet
 
Projet outils basiques version 2014
parRémi Bachelet
 
Gestion des risques Démarche
parRémi Bachelet
 
projet outils basiques version 2013
parRémi Bachelet
 
Week 3_103500.pptxmjhabahsisnzxhowuebsjs
parSamuelJourdain
 
L'impact ta priorité
parEnactusFrance
 
Eie livre complete opt
parSitrakiniaina Hasinjatovo
 
Pourquoi et comment Mesurer son impact ?
parEnactusFrance
 
1-4-_CL_et_composhhhhhhhhhhhhhhantes.ppt
parmrjamalamadid
 
Mesure de l'impact social
parNicolas VanNuffel
 
Final outline plan for webinar evaluation and impact assessment mof 2004 ...
parEricaPackingtonIOD
 
Approche cadre-logique
paryoussefCASA
 
cours gestion des projets et programmes humanitaire
paramidoudiarra2
 
2008-11-04 Jean-Gynse Bolivar Cadre logique comme outil de gestion
parPMI Lévis-Québec
 
Projet les fondamentaux
parMohamed DAHANI
 
amaghoss.docx
parAnassChokeir
 
cours environnement minier.ppt tujj gjh vbvb
paralassanesow12177
 

Plus de Rémi Bachelet

PPTX
Quel avenir pour les MOOC en entreprise ? oct 2017 - Séminaire ens cachan
parRémi Bachelet
 
PDF
Anasup cfa rencontres 2017 - Transformation digitale et transformation des fo...
parRémi Bachelet
 
PDF
QPES 2017 : Hybridation d’un MOOC : Quels moyens déployer ?
parRémi Bachelet
 
PDF
Qpes 2017 atelier intégrer un mooc supports animation
parRémi Bachelet
 
PPTX
Emoocs2017 who wants to chat on a mooc v1.2
parRémi Bachelet
 
PPTX
Open Education: the MOOC Experience
parRémi Bachelet
 
PDF
Le e-learning et la désinstitutionnalisation du savoir
parRémi Bachelet
 
PPTX
Integrer un MOOC en formation initiale - colloque QPES 2015
parRémi Bachelet
 
PDF
Symposium E-Formation 2015 - les données dans les MOOC - juin 2015
parRémi Bachelet
 
PDF
EMMOCs2015 - Do MOOC students come back for more? Recurring students in the G...
parRémi Bachelet
 
PDF
eMOOCs2015 Does peer grading work?
parRémi Bachelet
 
PDF
EMOOCs 2015 Barcamp -- Richer learning activities for MOOCs : 16 ideas
parRémi Bachelet
 
PPTX
D’une édition à l’autre - Innovations et chiffres des MOOC GdP successifs
parRémi Bachelet
 
PPTX
Projet outils organisation_projet version 2014
parRémi Bachelet
 
PDF
60 oppe numérique au service de l'enseignement de l'entrepreneuriat 10 12-2014
parRémi Bachelet
 
PDF
MOOC et diplomatie numérique
parRémi Bachelet
 
PDF
congrès learning, talent & development 4-12-2014
parRémi Bachelet
 
PDF
Spécificités de la scénarisation pédagogique des mooc – 6° rencontres fol de ...
parRémi Bachelet
 
PDF
#Mooc gd p – 56 - séminaire idea univ paris-est - 24-11-2014
parRémi Bachelet
 
PDF
NUMA - Les MOOCs dans la sphère professionnelle 28 octobre 2014
parRémi Bachelet
 
Quel avenir pour les MOOC en entreprise ? oct 2017 - Séminaire ens cachan
parRémi Bachelet
 
Anasup cfa rencontres 2017 - Transformation digitale et transformation des fo...
parRémi Bachelet
 
QPES 2017 : Hybridation d’un MOOC : Quels moyens déployer ?
parRémi Bachelet
 
Qpes 2017 atelier intégrer un mooc supports animation
parRémi Bachelet
 
Emoocs2017 who wants to chat on a mooc v1.2
parRémi Bachelet
 
Open Education: the MOOC Experience
parRémi Bachelet
 
Le e-learning et la désinstitutionnalisation du savoir
parRémi Bachelet
 
Integrer un MOOC en formation initiale - colloque QPES 2015
parRémi Bachelet
 
Symposium E-Formation 2015 - les données dans les MOOC - juin 2015
parRémi Bachelet
 
EMMOCs2015 - Do MOOC students come back for more? Recurring students in the G...
parRémi Bachelet
 
eMOOCs2015 Does peer grading work?
parRémi Bachelet
 
EMOOCs 2015 Barcamp -- Richer learning activities for MOOCs : 16 ideas
parRémi Bachelet
 
D’une édition à l’autre - Innovations et chiffres des MOOC GdP successifs
parRémi Bachelet
 
Projet outils organisation_projet version 2014
parRémi Bachelet
 
60 oppe numérique au service de l'enseignement de l'entrepreneuriat 10 12-2014
parRémi Bachelet
 
MOOC et diplomatie numérique
parRémi Bachelet
 
congrès learning, talent & development 4-12-2014
parRémi Bachelet
 
Spécificités de la scénarisation pédagogique des mooc – 6° rencontres fol de ...
parRémi Bachelet
 
#Mooc gd p – 56 - séminaire idea univ paris-est - 24-11-2014
parRémi Bachelet
 
NUMA - Les MOOCs dans la sphère professionnelle 28 octobre 2014
parRémi Bachelet
 

Projet evaluation impact

  • 1.
    1 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations L'évaluation des projets Source cc-by-SA : Wikimédia Commons
  • 2.
    2 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Avant de commencer Confort de lecture ? • 1080p/haute définition, sous-titres • mettre la vidéo en mode « plein écran » • mettre en pause, varier la vitesse youtube.com/html5 gestiondeprojet.pm • originaux des diapositives, vidéos HD, sous- titres.. • quiz, prise de notes partagée, ressources... • MOOC GdP :  forum, réseaux sociaux  certification de réussite
  • 3.
    3 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Cours sous licence Creative Commons • Paternité : citer l’auteur Partage : sous licence identique • Pas d’utilisation commerciale – Gratuit pour un usage personnel ou dans un cadre bénévole – Entreprise ou cursus universitaire : Demander l’autorisation • Votre organisation a-t-elle les droits ? => http://goo.gl/s2yRtv • RH ou formateur : Faire une demande d’utilisation => http://goo.gl/2uGj8s Images : cc-by source
  • 4.
    4 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Objectifs Au terme de cette formation, vous devez pouvoir : 1. Établir des termes de référence 2. Évaluer un projet : – Connaître les « bonnes pratiques » – Des exemples, tirés de projets/organisations sont signalés 3. Construire et mettre en œuvre des indicateurs d’impact 4. Comprendre et partager des concepts-clés (Présentés sur la page suivante) Lightbulb Jon Phillips public-domain-photos .
  • 5.
    5 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Vocabulaire de l’évaluation Finalité Moyens Restitution Termes de référence critères Objectifs/Résultats buts suivi-capitalisation Effets Impact prévu/réel Objectifs Situation de départ Indicateurs .
  • 6.
    6 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille  Objectifs de la formation  Concepts-clés  Le cycle des opérations Le cycle des opérations Programmation Formulation Identification Mise en œuvre Livraison Cadre logique, Termes de référence Etude de montage Rapports d’avancement Décision de continuer ou de réorienter le projet (évaluations intermédiaires) Domaines prioritaires, Objectifs globaux Plan Stratégique Décision sur la manière d’utiliser les résultats dans les projets futurs Rapport d’évaluation Adapté de : http://democratie.francophonie.org/IMG/ppt/Gestion_cycle_de_projet_et_cadre_logique.ppt Décision de financement Lancement.
  • 7.
    7 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
  • 8.
    8  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Fondamentaux de l’évaluation Source cc-by-SA : Wikimédia Commons
  • 9.
    9  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Action Résultats Impact .
  • 10.
    10  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Définitions Résultats = changements produits directement par l’action – A comparer avec les objectifs formalisés avant le lancement du projet. Effets = incidences directes et indirectes de l’action – Résultats de l’action mais aussi d'autres dynamiques / contraintes provenant du milieu (physique et humain). – Les effets peuvent être anticipés, mais avec une marge d’incertitude = p.e. objectifs propres des populations . Impact = changement à la suite de l’action – Prévoir l’impact présente encore plus de difficultés, car de nombreux facteurs extérieurs au projet. – Le temps est également un facteur, car l'impact se juge à terme .
  • 11.
    11  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
  • 12.
    12  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'évaluation des résultats Au vu des objectifs initiaux de l’action, comparer : – les objectifs définis – .. et les résultats atteints Deux visions : – quantitative : écart chiffré entre le prévu et le réalisé (p.e. 3 puits construits au lieu de 4) – qualitative : différence de nature entre le prévu / réalisé (p.e. un forage au lieu d’un puit) .
  • 13.
    13  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage Réduire le travail des femmes Diminution des temps d’attente aux puits Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
  • 14.
    14  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
  • 15.
    15  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'évaluation des effets L’évaluation des effets porte sur l’interaction entre l’action et l’environnement du projet. – Le public concerné par les effets est plus large que le public-cible de l’action – Les stratégies menées par les personnes et les populations sont souvent difficiles à prévoir – D’autres actions ont pu interférer – … .
  • 16.
    16  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage La population continue de puiser l’eau au marigot sauf en saison sèche Réduire le travail des femmes Diminution des temps d’attente aux puits Le temps libéré permet des activités productives : culture, tissage… Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Les villageois stockent l’eau dans des récipients contaminés par l’eau du marigot Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
  • 17.
    17  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact .
  • 18.
    18  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L’appréciation de l’impact L'impact d'un projet est l’ensemble des changements …significatifs …durables positifs et négatifs prévus et imprévus sur les personnes, les groupes et leur environnement … ayant un lien de causalité avec l’action .
  • 19.
    19  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action et ses objectifs Résultats Effets Impact Réaliser 12 puits répondant aux normes techniques • 10 puits 60m3 • 1 forage La population continue de puiser l’eau au marigot sauf en saison sèche L’action n’a pas amélioré la situation sanitaire des populations. (Pourtant les résultats correspondent aux objectifs des actions) Par contre, les nouvelles activités productives des femmes produisent des revenus, dont une partie sert à améliorer la santé. Réduire le travail des femmes Diminution des temps d’attente aux puits Le temps libéré permet des activités productives : culture, tissage… Diminuer les maladies liées à l’eau Bonne qualité bactériologique de l’eau des puits Les villageois stockent l’eau dans des récipients contaminés par l’eau du marigot Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
  • 20.
    20  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Il est difficile d’anticiper l’impact • Impact technique : – attendu : des villageois autonomes et formés pour l’entretien ; – inattendu : création d’entreprises de réparation des puits dans la zone. • Impact économique : – attendu : la caisse villageoise est alimentée par le paiement de l’eau ; – inattendu : la caisse permet le création d’emplois dans les entreprises d’entretien des puits. • Impact social : – attendu : les enfants du village sont en meilleure santé ; – inattendu : les enfants libérés de la corvée d’eau peuvent aller à l’école. • Impact financier : – attendu : constitution d’une caisse pour l’entretien de chaque puits ; – inattendu : l’argent d’une caisse est détourné • Impact organisationnel : – attendu : constitution des comités de gestion ; – inattendu : certains comités de gestion des puits conduisent d’autres action, p.e gèrent un potager pour l’école. Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL .
  • 21.
    21  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Anticiper l’impact Quels sont les enjeux, acteurs et parties prenantes du projet ? – Dirigeants, chefs, élus.. – Groupes et associations, – Fonctionnaires et agents de tutelle, – Financeur, bailleurs de fonds – Entreprise, opérateurs économiques, – etc… .. analyser leurs zones d'incertitudes et anticiper leurs stratégies (voir cours d’analyse stratégique des projets) .
  • 22.
    22  Définitions  Objectifset résultats  L'évaluation des effets  Apprécier l’impact Chapitre 1 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Action Résultats Impact . Synthèse : retour sur les points fondamentaux . . .
  • 23.
    23 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
  • 24.
    24  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Le processus d’évaluation Photos © www.ifadem.org
  • 25.
    25  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Les termes de référence • Établis au début du projet. – Ils permettent de délimiter l’évaluation, d’en préciser les objectifs • Qu’est-ce que l’on cherchera à savoir sur une action : impacts attendus, moyens de les mesurer… • Être clair sur ce que le commanditaire attend de l’évaluation • Questions : 1. Contexte ? Acteurs, milieu, antériorité 2. Qu’est-ce qu’il faut évaluer ? Questions évaluatives, Critères 3. Impact attendu ? Indicateurs, méthodologie d’évaluation ? 4. Restitution des résultats : à qui, comment ? 5. Moyens : budget, étapes du déroulement ? – Guides méthodologique F3E, Daniel NEU • Préparer les termes de référence • La préparation collective des termes de référence d’une évaluation .
  • 26.
    26  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Le suivi – évaluation Action Résultats Impact situation de départ Evaluation intermédiaire Evaluation finale Evaluation ex-post Procéder régulièrement à des évaluations : les jalons et réunions de suivi du projet : • Elles peuvent être des auto-évaluations, évaluations externes/audits, etc… ou êtres faites pendant des réunions du projet. • On peut évaluer les effets, mais aussi le dispositif lui-même (implication des acteurs..). .
  • 27.
    27  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL Le suivi-capitalisation Collecter et analyser régulièrement “l’information utile à l’action”. – Prendre le temps d’observer = écoute et distanciation. – S’informer sur les autres actions en cours sur la zone. – Noter, conserver par écrit les éléments repérés Impact Action Capitalisation .
  • 28.
    28  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Lors d’une formation animée par Centrale Lille dans un Campus numérique francophone de l’AUF pour créer un MOOC. A la même question “Que faites-vous ?” – Le 1er enseignant dira : j’apprends à me servir d’une plateforme de formation à distance – Le second répondra : je me forme à de nouvelles méthodes pédagogiques – Le 3ème : avec le MOOC je donnerai accès à l’enseignement supérieur à tous, pas uniquement mes étudiants habituels – Le 4ème : je contribue à réduire la fracture numérique entre le Sud et le Nord .
  • 29.
    29  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille • Se servir d’une plateforme de formation est le moyen. • Se former à de nouvelles méthodes pédagogiques est l’objectif. • Donner accès à un public nouveau est le but. • Réduire la fracture numérique est la finalité. .
  • 30.
    30  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille • La finalité : c’est l’idéal vers lequel on tend. La finalité fait référence à des valeurs : – la dignité, la liberté, l’égalité, etc. • Le but : c’est la matérialisation de la finalité que l’on se donne = l’impact attendu. – Le but est concret, mais il n’est pas accessible immédiatement. • L’objectif : c’est le résultat attendu d’une action. Atteindre les objectifs doit produire des résultats. – Les objectifs sont ordonnés dans le temps et dans l’espace : on parle alors d’objectifs principaux, de sous-objectifs, etc. • Les moyens sont les financements, compétences, outils et méthodes pour atteindre les objectifs. – Il est indispensable de mobiliser des moyens et des ressources .
  • 31.
    31  Termes deréférence  Suivi : évaluation et capitalisation  Moyens, objectifs, buts et finalité Chapitre 2 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Synthèse : le processus d’évaluation . • Termes de référence • Suivi • Moyens, objectifs, buts et finalité . .
  • 32.
    32 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Critères de réussite, bonnes pratiques
  • 33.
    33 IFADEM Initiative francophone pourla formation à distance des maîtres
  • 34.
    34 IFADEM : leprojet 1er regroupement 2 jours Autoformation tutorée 6 mois 2e regroupement 2 jours Autoformation tutorée 6 mois 3ème regroupement 3 jours Evaluation des enseignants / Evaluation du dispositif Parcours de 350 heures de formation Cas IFADEM développé par Marion Alcaraz, AUF
  • 35.
    35 La convention IFADEM-Burundi Parties prenantes •AUF • OIF • Ministère de l’enseignement Budget • 1,4M€ AFD • 400.000€ AUF/OIF dont valorisation personnels et locaux Cadre logique (pour en savoir plus) • Objectifs • Activités • Moyens • Résultats attendus • Risques encourus • Moyens pour surmonter les risques (mitigation) • Indicateurs
  • 36.
    36 Les deux évaluationsfinales Evaluation externe • Respects des procédures • Bonne gestion des financements Audit financier Termes de référence…
  • 37.
    37 Termes de référence- le contexte Contexte de l’évaluation • Pays • Système éducatif • Formation des maîtres • IFADEM Présentation du projet IFADEM-Burundi • Cadre conventionnel • Organisation / acteurs • Calendrier • Activités menées • Réalisations • Budgets • Etc.
  • 38.
    38 Termes de référence- Les objectifs Objectifs quantitatifs • Former 1800 instituteurs • Développer 7 livrets de formation • Créer 4 Espaces numériques • Former une centaine de formateurs de formateurs Objectifs qualitatifs • Améliorer les compétences professionnelles des enseignants du primaire • Tester et valider une stratégie nationale de formation continue
  • 39.
    39 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Exemples de projets et de leur impact 4. Construire des indicateurs 5. Suivre et valoriser une évaluation
  • 40.
    40  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Construire des indicateurs Photos © www.ifadem.org
  • 41.
    41  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Que sont des indicateurs d’impact ? Ce sont des signes vérifiables et mesurables qui, – par comparaison à une référence, – permettent de porter une appréciation … on les met au point à partir de l'impact anticipé du projet .
  • 42.
    42  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille L'impact attendu permet de trouver des indicateurs Source : Prise en compte de l’impact et construction d’indicateurs d’impact Gilbert Graugnard - Nicolas Heeren CIEDEL indicateur indicateur.
  • 43.
    43 Impact attendu pourIFADEM Connaissances professionnelles • « connaitre les étapes d’une leçon » • .. Pratiques de classe • « travail en groupes » • … Observer des séances de classe – Lire des rapports d’évaluations de systèmes éducatifs Cas IFADEM développé par Marion Alcaraz, AUF Impact attendu : Amélioration des compétences 1. Théoriques 2. Pratiques des enseignants Indicateurs Effets
  • 44.
    44 Questionnaire « Connaissances professionnelles »Grille d’observation « séances de classe » Mesure des indicateurs Indicateurs : • Connaissances professionnelles • Pratiques de classe Voir cours Méthodes de recueil de données Les entretiens, conception de questionnaires, observation directe …
  • 45.
    45 QCM sur lesconnaissances professionnelles • 20% des enseignants interrogés connaissent les étapes d’une leçon de compréhension orale • …. • Moyenne de 23,7/45 Observation de séances de classe • 13% des enseignants acceptent que leurs élèves utilisent des tournures « français oral » • 44% des enseignants font travailler leurs élèves en groupes • … Situation de départ Situation de départ = Recueil des données au démarrage du projet
  • 46.
    46  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Démarche déductive Indicateurs Impact attendu situation de départ .
  • 47.
  • 48.
    48  Même méthodologie Utilisationdes indicateurs Situation finale Evaluation ex-post Recueil des données après la fin du projet
  • 49.
    49  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Indicateurs Situation finale « terrain » IMPACT REEL Démarche inductive .
  • 50.
    50 Évolution des résultats ? Lesenseignants qui avaient obtenu les moins bons résultats à l’entrée sont- ils ceux qui ont le plus évolué ? DynamiquesEcarts Situation de départ Entrée des enseignants en formation. Evaluation ex-post Sortie de formation pour les enseignants IMPACT Quel impact ? INDICATEURS
  • 51.
    51  L'impact attendu Définir les indicateurs  La situation de départ  Mesure de l’impact réel Chapitre 4 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Synthèse : indicateurs et impact . . . . • L'impact attendu • Indicateurs • Impact
  • 52.
    52 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Sommaire 1. Fondamentaux de l’évaluation 2. Le processus d’évaluation 3. Les termes de référence : l’exemple d’IFADEM 4. Évaluer l’impact en mettant en œuvre des indicateurs 5. Suivre et valoriser une évaluation
  • 53.
    53  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Suivre et valoriser une évaluation Photos © www.ifadem.org
  • 54.
    54  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille Les critères • Les “angles de vue” grâce auxquels on porte une jugement. • Les critères les plus courants sont : 1. l’efficacité : compare les résultats aux objectifs prévus (en quantité et en qualité), 2. l’efficience : compare les résultats avec les ressources utilisées (moyens humains et matériels), 3. la pérennité : l’action est durable/soutenable (elle se poursuit de manière autonome sans appui extérieur), – La méthodologie de mise en œuvre des critères est également développée dans la vidéo formation au brainstorming. – D’autres critères peuvent être utilisés : participation, environnement, cohérence avec d’autres projets, etc… .
  • 55.
    55  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille IFADEM : Les critères Pertinence Efficacité Efficience Viabilité/ durabilité • Bien-fondé des activités menées au regard du contexte – cohérence interne et cohérence externe. • Degré d’atteinte des objectifs - taux de réalisation du projet. • Rapport activités / moyens – étude des coûts • Capacités des bénéficiaires à pérenniser les actions menées .
  • 56.
    56  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À quoi sert l’évaluation ? (1/2) • Contrôler – … si ce qui a été prévu a été réalisé, vérifier comment le financement a été utilisé • S’améliorer – Faire mieux la prochaine fois • Piloter – Indique ce qui a marché ou pas, de ne pas refaire les mêmes erreurs, régulation en cours de projet • Capitaliser – Mémoriser l’expérience, la transformer en savoir partageable .
  • 57.
    57  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À quoi sert l’évaluation ? (2/2) • Former – Si l’évaluation est participative, elle permet aux acteurs de progresser • Communiquer – Sur les actions, leur résultat, leur impact • Faire participer – Si les termes de référence sont construits et négociés avec toutes les parties prenantes • Mais aussi … – Mesurer, réfléchir avant d’agir, connaître ses faiblesses, motiver.. .
  • 58.
    58  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille À votre avis, qu’est-ce qui fait qu’une évaluation marche bien ou mal ? Selon : – La volonté de progresser • Désir de changement ? Craintes ? – L’équipe-projet • Ouverte ? Stabilisée ? – Les convergences d’intérêts des acteurs • Concertation ? Négociation ? – Le type de management • Autoritaire /vertical ? Collaboratif/horizontal ? – L’importance accordée à l’évaluation • Durée ? Moyens financiers et humains ? Temps de restitution ? – Ce qui se passe après l’évaluation • Des moyens pour appliquer les conclusions, une valorisation, une corvée ? .
  • 59.
    59 Les résultats del’évaluation http://www.ifadem.org « L’évaluation de la 2e phase IFADEM a permis de mettre en évidence la nature de la performance de l’action de formation continue (…) Ce rapport montre les potentialités du système en cours de construction par le ministère et les différentes parties prenantes ; il souligne aussi certaines conditions qui déterminent la viabilité d’un plan stratégique de formation continue dans les cinq années à venir. »
  • 60.
    60  Les critères À quoi sert l’évaluation?  Bonnes pratiques Chapitre 5 Dr. Rémi Bachelet Maître de conférences à Centrale Lille . Synthèse : Suivre et valoriser • Les critères • À quoi sert l’évaluation ? – Contrôler, s’améliorer, piloter, capitaliser, former, communiquer, faire participer…. • Bonnes pratiques – La volonté de progresser – L’équipe-projet – Les convergences d’intérêts – Le management – L’importance accordée à l’évaluation – Ce qui se passe après l’évaluation . .
  • 61.
    61 Dr. Rémi Bachelet Maîtrede conférences à Centrale Lille Merci de votre attention ! Pour approfondir – Guides et outils F3E : http://f3e.asso.fr – Économie de l’évaluation : Analyse coût-bénéfice – L’évaluation d’un site internet : Web analytics – Méthodes de recueil et d’analyse de données