Différences

Ci-dessous, les différences entre deux révisions de la page.

--- fr:guide:implementation:evaluation [2018/10/29 10:57]
Camille [Surveillance et évaluation]
+++ fr:guide:implementation:evaluation [2019/06/07 11:09]
Cecilia [Des outils pour se rendre compte de ses progrès]
@@ Ligne 1: / Ligne 1: @@
 ====== Suivi et évaluation ======
-===== Le processus d'évaluation =====
-Lors de la mise en œuvre d'une tournée Heterotopia, vous devez surveiller et évaluer différents aspects du projet. Un suivi fréquent vous permet de ** prévenir les risques **, ** de gérer les problèmes à temps **, ** de garantir la qualité ** et ** d'anticiper ** les situations pouvant influencer votre projet.
+=====  Le processus d’évaluation =====
-Le plan général de suivi et d’évaluation peut inclure:
+Il est crucial de suivre et d'évaluer les différents aspects du projet au cours de sa mise en oeuvre. Un suivi régulier vous permettra de **diminuer les risques**, de **régler à temps les problèmes**, de **garantir la qualité des réalisations** et d'**anticiper** de nombreuses situations qui pourraient nuire à votre projet.
-^ Aspect to monitor                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        ^ Minimum frequency                                                                                                                                                    ^ Tools for monitoring                                                                                                                                                                                                                                                                              ^
+Un plan général de suivi et d'évaluation inclut typiquement:
-| Partnership – implementing partners\\ Assess: \\ -	partners’ motivation and commitment level\\ -	fair task division\\ -	timely and quality implementation of tasks\\ -	respect and solidarity among partners\\ -	quality of communication between partners                                                                                                                                                                                                                                                                               | Monthly                                                                                                                                                              | -	Online and in-person  meetings\\ -	Gantt chart with tasks, responsibilities and deadlines\\ -	Quality assurance guidelines with qualitative and quantitative Indicators\\ -	Written and signed agreement between partners about conditions and provisions of collaboration\\ -	Written reports  |
-| Management – logistics (accommodation, food, transport, materials)\\ Assess:\\ -	timely and quality implementation of tasks\\ -	quality of services                                                                                                                                                                                                                                                                                                                                                                                      | Monthly\\ Getting closer to the start of the Tour: more frequently\\ During the Tour: daily                                                                          | -	Gantt chart with tasks, responsibilities and deadlines\\ -	Feedback from participants and from facilitators\\ -	Coordination staff meetings                                                                                                                                                     |
-| Management – budget use\\ Assess:\\ -	Budget efficiency (quality-price value)\\ -	Fair budget allocation (did any partner had justifiable over-costs that should be covered? )\\ -	Budget efficiency                                                                                                                                                                                                                                                                                                                                     | Monthly\\ Getting closer to the start of the Tour: more frequently\\ During the Tour: daily                                                                          | -	Budget plan divided in two parts: original budget plan and real budget\\ -	Reporting on budget use, with financial documents to verify the costs\\ -	Online partner meetings\\ -	Coordination staff meetings                                                                                    |
-| Partnership – local partners\\ -	partners’ motivation and commitment level\\ -	timely and quality implementation of tasks/quality services\\ -	quality of communication between partners                                                                                                                                                                                                                                                                                                                                                 | Monthly\\ Getting closer to the start of the Tour: more frequently\\ During the Tour, in case of partners who are providing accommodation: daily                     | -	Online and in-person  meetings\\ -	Agreement stating the conditions and provisions of collaboration                                                                                                                                                                                             |
-| Activity programme’s efficiency\\ Assess:\\ -	The activities contribute to reach the participants’ learning objectives\\ -	The activities contribute to reach the project objectives\\ -	The methods used are suitable for participants\\ -	The time schedule of the activities is suitable for participants                                                                                                                                                                                                                             | Before the Tour: bi-weekly, starting from the preparatory activities\\ During the Tour: daily\\ After the Tour: bi-weekly, till the end of the follow-up activities  | -	Online and in-person consultations with youth workers during the preparation\\ -	Daily feedback from participants during the Tour\\ -	Daily monitoring meetings with facilitators during the Tour\\ -	Intermediate and final evaluation sessions                                                     |
-| Facilitators’ work\\ Assess:\\ -	Quality of support provided for participants before, during and after the Tour\\ -	Team working skills\\ -	Professional efficiency\\ -	Respect for the pedagogical methodology\\ -	Flexibility and immediate adaptability to participants’ needs                                                                                                                                                                                                                                                        | Before the Tour: bi-weekly, starting from the preparatory activities\\ During the Tour: daily\\ After the Tour: bi-weekly, till the end of the follow-up activities  | -	Online and in-person consultation with youth workers during the preparation\\ -	Daily feedback from participants\\ -	Daily monitoring meetings with facilitators\\ -	Intermediate and final evaluation sessions                                                                                      |
-| Participants well-being\\ Assess:\\ -	Physical well-being\\ -	Psychological well-being\\ -	Emotional well-being                                                                                                                                                                                                                                                                                                                                                                                                                          | Before the Tour: bi-weekly, starting from the preparatory activities\\ During the Tour: daily\\ After the Tour: bi-weekly, till the end of the follow-up activities  | -	Online and in-person consultation with youth workers during the preparation\\ -	Daily feedback from participants\\ -	Daily monitoring meetings with facilitators\\ -	Intermediate and final evaluation sessions                                                                                      |
-| Participants’ learning achievements\\ Assess:\\ -	How much the preparatory activities help to create a solid base for learning\\ -	How much the Tour contributes to reach participants’ learning objectives \\ -	Which objectives have been reached and which not yet\\ -	Competencies developed\\ -	Level of responsibility and contribution of participants\\ -	Changes in attitudes and behaviours of participants\\ -	How much the follow-up activities help participants to put into use the competencies acquired during the Tour  | Before the Tour: bi-weekly, starting from the preparatory activities\\ During the Tour: daily\\ After the Tour: bi-weekly, till the end of the follow-up activities  | -	Daily reflection sessions with participants\\ -	Non-formal evaluation methods\\ -	Daily monitoring meetings with facilitators\\ -	Intermediate and final evaluation sessions                                                                                                                         |
-| Level of achievement of objectives\\ \\ Assess:\\ -	The objectives of the activities have been reached or not\\ -	The objectives of the participants’ have been reached or not\\ -	The objectives of the project have been reached or not                                                                                                                                                                                                                                                                                                | During the Tour: daily\\ After the Tour: monitoring moments 2 weeks, 1 months, 2 months, 6 months after the Tour                                                     | -	Daily evaluation of activities\\ -	If necessary, ad-hoc evaluation after the activity\\ -	Intermediate and final evaluations with participants\\ -	Final report on indicators that measure the level of achievement of project objectives                                                            |
-Besides monitoring the aspects that you and your partners can control, it is important to think about the **external factors** as well: we suggest you to make a **risk analysis** and **risk prevention and management plan** before the project. You can analyze the following aspects:
+^ Aspects à évaluer                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                        ^ Fréquence minimum d’évaluation                                                                                                                                                                                       |                                                                                                                                                                                                                                                                                                                                    |
+| **Partenariat - partenaires internationaux** \\ - Motivation et engagement des partenaires \\ - Répartition équitable des tâches \\ - Mise en œuvre des tâches rapide et de qualité  \\ - Respect et solidarité entre les partenaires \\ - Qualité de la communication entre les partenaires                                                                                                                                                                                                                                                                                                                                                                                                                             | Lors de la préparation : Mensuel \\ Lorsque le Voyage approche : plus fréquemment                                                                                                                                    | - Réunions en ligne et en personne \\ - Diagramme de Gantt avec tâches, responsabilités et délais \\ - Recommandations pour garantir la qualité avec des indicateurs qualitatifs et quantitatifs \\ - Accord écrit et signé entre les partenaires sur les conditions et les dispositions de la collaboration \\ - Rapports écrits  |
+| **Gestion - logistique** (hébergement, restauration, transport, matériel) \\ - Mise en œuvre rapide et de qualité des tâches \\ - Qualité des services                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                   | Lors de la préparation : Mensuel \\ Lorsque le Voyage approche : plus fréquemment \\ Pendant le Voyage : tous les jours                                                                                              | - Diagramme de Gantt avec tâches, responsabilités et échéances \\ - Feedback des participants et des facilitateurs \\ - Réunions des coordinateurs                                                                                                                                                                                 |
+| **Gestion - utilisation du budget** \\ - Efficience (rapport qualité-prix) \\ - Allocation budgétaire équitable (un partenaire a-t-il des dépassements de coût justifiés qui devraient être couverts ?) \\ - Efficacité budgétaire                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       | Lors de la préparation : Mensuel \\ Lorsque le Voyage approche: plus fréquemment \\ Pendant le Voyage: tous les jours                                                                                                | - Plan budgétaire en deux parties: plan budgétaire initial et budget réel \\ - Rapport sur l'utilisation du budget, avec documents financiers permettant de vérifier les dépenses \\ - Réunions de partenaires en ligne \\ - Réunions du personnel de coordination                                                                 |
+| **Partenariat - partenaires locaux** \\ - Motivation et engagement des partenaires \\ - Mise en œuvre rapide et de qualité des tâches / services de qualité \\ - Qualité de la communication entre les partenaires                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                       | Mensuel \\ Lorsque le Voyage approche : plus fréquemment \\ Pendant le Voyage : tous les jours (en particulier avec les responsables des organisations d'accueil).                                                   | - Réunions en ligne et en personne \\ - Accord précisant les conditions et les dispositions de la collaboration                                                                                                                                                                                                                    |
+| **Efficacité du programme d'activités** \\ - Les activités contribuent-elles (et dans quelle mesure) à atteindre les objectifs d'apprentissage des participants ?\\ - Les activités contribuent-elles (et dans quelle mesure) à atteindre les objectifs du projet ?\\ - Les méthodes utilisées conviennent-elles aux participants ?\\ - Le calendrier des activités convient-il aux participants ?                                                                                                                                                                                                                                                                                                                       | Avant le Voyage: toutes les deux semaines, à partir des activités préparatoires \\ Pendant le Voyage: tous les jours \\ Après le Voyage: toutes les deux semaines, jusqu'à la fin des activités de suivi             | - Consultations en ligne et en personne avec les animateurs / facilitateurs lors de la préparation \\ - Espaces d’expression quotidiens avec les participants pendant le Voyage \\ - Réunions de suivi quotidiennes avec les animateurs / facilitateurs pendant le Voyage\\ - Sessions d'évaluation intermédiaires puis finale     |
+| **Travail des animateurs / facilitateurs** \\ - Qualité de l’accompagnement des participants avant, pendant et après le Voyage \\ - Capacité à travailler en équipe \\ - Efficacité professionnelle \\ - Respect de la méthodologie / de l'approche pédagogique \\ - Flexibilité et adaptabilité aux besoins des participants                                                                                                                                                                                                                                                                                                                                                                                            | Avant le Voyage : toutes les deux semaines, à partir des activités préparatoires \\ Pendant le Voyage : tous les jours \\ Après le Voyage : toutes les deux à trois semaines, jusqu'à la fin des activités de suivi  | - Consultation en ligne et en personne avec les animateurs de jeunesse / facilitateurs lors de la préparation \\ - Feedback quotidien des participants \\ - Réunions de suivi quotidiennes avec les animateurs / facilitateurs \\ - Sessions d'évaluation intermédiaires et finale                                                 |
+| **Bien-être des participants** \\ - Bien-être physique \\ - Bien-être psychologique \\ - Bien-être émotionnel                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            | Avant le Voyage : toutes les deux semaines, à partir des activités préparatoires \\ Pendant le Voyage : tous les jours \\ Après le Voyage : toutes les deux à trois semaines, jusqu'à la fin des activités de suivi  | - Consultation en ligne et en personne (entretien) avec les animateurs de jeunesse / facilitateurs référents lors de la préparation \\ - Feedback quotidien des participants \\ - Réunions de suivi quotidiennes avec les animateurs / facilitateurs \\ - Sessions d'évaluation intermédiaires et finale                           |
+| **Résultats d'apprentissage des participants** \\ - Dans quelle mesure les activités préparatoires permettent-elles de créer une base d'apprentissage solide ?\\ - Dans quelle mesure le Voyage en Hétérotopie contribue-t-il à l'atteinte des objectifs d'apprentissage des participants ?\\ - Quels objectifs ont été atteints et quels objectifs ne le sont pas encore ? \\ - Compétences développées \\ - Niveau de responsabilité et de contribution des participants \\ - Changements dans les attitudes et les comportements des participants \\ - Dans quelle mesure les activités de suivi proposées au retour aident-elles les participants à mettre en pratique les compétences acquises pendant le Voyage ?  | Avant le Voyage : toutes les deux semaines, à partir des activités préparatoires \\ Pendant le Voyage : tous les jours \\ Après le Voyage : toutes les deux à trois semaines, jusqu'à la fin des activités de suivi  | - Sessions de réflexion quotidiennes avec les participants \\ - Méthodes d'évaluation non formelles \\ - Réunions de suivi quotidiennes avec les animateurs \\ - Sessions d'évaluation intermédiaires et finales                                                                                                                   |
+| **Niveau de réalisation des objectifs** \\ - Les objectifs des activités ont-ils été atteints ? \\ - Les objectifs des participants ont-ils été atteints ?\\ - Les objectifs du projet ont-ils été atteints ?                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                            | Pendant le Voyage : tous les jours \\ Après le Voyage : Suivi 2 semaines, 1 mois, 2 mois et 6 mois après le voyage                                                                                                   | - Évaluation quotidienne des activités \\ - Si nécessaire, évaluation ad hoc après l'activité \\ - Évaluations intermédiaire et finale avec les participants \\ - Rapport final sur les indicateurs mesurant le niveau de réalisation des objectifs du projet                                                                      |
-| Possible risk/situation  | How does it influence the project  | Level of probability  | Level of damage/how serious is the problem it can cause  | How to prevent it  | How to manage it in case it happens  |
+| Risque / situation possible | Comment influence-t-il le projet | Niveau de probabilité | Niveau de dommage / quelle est la gravité du problème que cela peut causer | Comment l'empêcher | Comment le gérer au cas où cela se produirait |
-As you see, the 1st table helps you to ensure quality and to get right back on track after a difficulty; the 2nd table facilitates **problem solving** and **crisis prevention**.
+Ces deux tableaux d'analyse vous permettront :
+  * Pour le premier : d’atteindre un haut degré de qualité et de repartir du bon pied en cas d’obstacle ;
+  * Pour le second : de mieux **anticiper les problèmes** aux fins de les **résoudre**.
-For information about impact evaluation please see //Chapter 6 – Follow ups and dissemination//.
+Pour plus d’information sur l’évaluation des impacts, reportez-vous au //Chapitre 6 – Comment évaluer l'impact du projet et diffuser ses résultats//.
+===== Une matrice pour maintenir le cap =====
+Le **Cadre logique** créé lors de la conception du projet peut être utile pour suivre et évaluer le projet, qualifier la qualité de sa mise en œuvre et déterminer si vous avez atteint (ou non) vos objectifs.
+Réaliser un Cadre logique impliquera de votre part de :
+  * Fixer des **objectifs clairs** ;
+  * Décrire les **résultats attendus** qui contribueront à atteindre les objectifs ;
+  * Décrire les **activités** qui produiront les résultats que vous attendez ;
+  * Définir des **indicateurs quantitatifs et qualitatifs réalistes** qui vous permettront de mesurer votre niveau de réussite ;
+  * Décrire les **preuves** que vous pourrez fournir pour justifier les résultats obtenus ;
+  * Analyser attentivement les **circonstances** dont vous aurez besoin pour mettre en place votre action et atteindre //in fine// vos objectifs.
-===== A Matrix to stay the course =====
+{{:guide:implementation:s1040013.jpg?direct&260 |}}
+Pour plus de détails sur la méthode, voir : [[http://www.tools4dev.org/resources/logical-framework-logframe-template/]]).
-A **Logical Framework Matrix** created during the project design phase can be useful to monitor and evaluate during implementation whether you have reached the project’s objectives or not.
+Comme dans n’importe quelle évaluation, soyez **factuel et honnête** en constatant les résultats. Il ne s’agit pas de vous prouver que vous faites du bon travail ; il s’agit de créer des outils pour identifier ce qui fonctionne bien et ce qui laisse à désirer. Rappelez-vous qu'**envisager un problème, c’est déjà commencer à le résoudre** et qu’il faut pouvoir regarder les choses en face pour se féliciter du travail accompli au terme du processus.
-For creating a Logical Framework Matrix you will need to:
+===== Des outils pour se rendre compte de ses progrès =====
-  * Set clear **objectives**
+Les acquis d'apprentissages des participants sont au coeur du Voyage en Hétérotopie. L'objectif ait qu'ils y trouvent de l'**inspiration** et qu'ils acquièrent des **compétences** dans différents domaines ; certains auxquels ils s'attendaient et d'autre non.
-  * Describe the **expected results** that will contribute to reach the objectives
-  * Describe the specific **activities** that will produce the expected outcomes
-  * Set reasonable **quantitative indicators** that will measure the level of success
-  * Decide which **proof** you can provide to justify the reached results
-  * Analyze closely which **circumstances** you need for a successful implementation
-You can find details to how to do it here: [[http://www.tools4dev.org/resources/logical-framework-logframe-template/]]).
+C'est pourquoi il est nécessaire de concevoir et mettre en place des **outils et des méthodes** qui leur permettront de **réaliser ce qu'ils ont appris**. Ce n'est qu'alors que vous pourrez évaluer l'efficacité de votre programme d'activités d'un point de vue pédagogique.
-As for any evaluation, be **factual and upfront** regarding the results. You don't need to convince yourselves that you are doing a good job; you create tools to identify what is going well and what isn't. Keep in mind that **problem solving begins with the identification of problems**, as well as real celebrations arise from honest assessments.
+Au regard de nos expériences passées, nous vous recommandons notamment ces outils:
-{{:guide:implementation:s1040013.jpg?direct&600 |}}
+[[guide:implementation:evaluation:tools_and_methods1|Cartographier ses savoirs, savoir-être et savoir-faire avec un Radar]] (en anglais seulement)
-===== Tools to take the scope of one's learnings =====
+[[guide:implementation:evaluation:tools_and_methods2|Envisager le chemin parcouru grâce au Journal de Bord et au  "Hero's Journey" (Monomythe)]] (en anglais seulement)
-Participants' learnings are at the core of any Heterotopia Tour. We expect from it to inspire them and to enable them to acquire knowledge and skills in various fields; some they expected, and some they didn't.
-For this reason, it is decisive to develop and implement **tools and methods** that will allow them to **acknowledge their learning** and provide you information about the efficiency of your program from a pedagogical point of view.
+[[fr:guide:implementation:security|{{ :guide:fleche.jpg?50|}}]]
-From our experience, we advice you the following:
-[[guide:implementation:evaluation:tools_and_methods1|Mapping out one's skills and competences with a Radar]]
-[[guide:implementation:evaluation:tools_and_methods2|Reflecting on one's learning path with the Travel Diary and the Hero's Journey]]

Ideal's in action

Outils pour utilisateurs

Outils du site

Différences

Outils de la page