Les critères de coopération andalouse sont les suivants :
• Efficacité
• Efficacité et viabilité
• Impact
• Durabilité
• Appropriation et renforcement institutionnel
• Approche genre dans le développement
• La durabilité environnementale
• Diversité culturelle.
Conformément à ces critères, une série de questions a été élaborée pour mesurer ces critères, en formulant une matrice d'évaluation qui est reproduite ci-dessous. Les questions permettent de mesurer l'adéquation aux critères de la conception, des processus et des résultats du projet. Quelques indicateurs initiaux ont été identifiés et une liste de sources possibles et de techniques de collecte de données a été proposée par l'évaluateur.
Une fois la matrice d'évaluation approuvée par l'UGT-A, l'évaluateur a commencé à recueillir des informations et un programme de travail a été préparé entre le 29 novembre et le 8 décembre 2021 dans les trois provinces. Cependant, cet agenda a dû être abandonné en raison de la fermeture des frontières.
La fermeture des frontières n'ayant pas été levée en janvier et compte tenu de la fin imminente du délai de remise du rapport d'évaluation à l'AACID, il a été décidé de mener des entretiens en ligne et de privilégier l'analyse documentaire.
Il a été décidé de ne pas refaire la matrice d'évaluation et de ne sélectionner parmi les sources et techniques que celles disponibles et d'adapter les outils développés à la situation et aux limites imposées par l'impossibilité de réaliser des observations directes et des entretiens en face-à-face et de mise au point groupes.
Les seuls entretiens en face-à-face ont été avec le responsable expatrié d'ISCOD, en tant qu'entité liée institutionnellement à l'UGT et au courant du travail de l'UGT-Andalousie au Maroc, d'une part, et avec le coordinateur étatique et le coordinateur administratif du projet SNE à Casablanca le 29 et le 30 novembre 2021 avant le retour urgent de l'évaluateur en Espagne, d'autre part.
La matrice d'évaluation complète est reproduite ci-dessous.
JOSE GINEL SANCHEZ cert. élec. repr. 07/02/2022 15:30 PAGE 10/60
CHÈQUE G41540204 PECLA063986408D311493623801825 https://ws050.juntadeandalucia.es/verificarFirma/
Question Critères d’évaluation Indicateurs Sources et techniques de recueil 1. L'intervention correspond-elle à
les priorités et les besoins des Population bénéficiaire ? du et du enfants? Des professeurs ? Des mères et pères? Du SNE ? 2. L'élection du
partenaire local?
3. Le modèle a-t-il été valide ? intervention mise en place ? 4. Les problèmes sont-ils identifiés correspondent à la réalité et priorités locales ?
5. Le projet est aligné sur le Les priorités de l'AACID ? Du gouvernement
Marocain? Du partenaire local?
Validité et adéquation qualitative et mesures quantitatives et
modalités d'intervention prévu.
Validité et adéquation du partenaire local pour obtenir des résultats et objectifs actions aux priorités de la AACID, SNE et gouvernement marocain
À partir du moment fixé dans formulation du projet en selon les besoins, priorités et objectifs.
Les résultats obtenus par le partenaire local
Question Critères d’évaluation Indicateurs Sources et
techniques de recueil EFFICACITÉ Les résultats ont-ils été atteints ?
prévu? En quelle classe ?
Les objectifs prévus ont-ils été atteints ? En quelle classe ?
D'autres effets ont-ils été obtenus ? prévu?
Était-il possible d'attendre
atteinte des résultats et des objectifs prévue compte tenu de l'état d'avancement trouvé au moment de
évaluation?
Avez-vous rencontré des difficultés ? destinataires et destinataires d'accéder aux activités d'intervention?
Des mécanismes ont-ils été mis en place ? au profit du collectif
les plus vulnérables ou les plus
marginalisé ? comment pourraient-ils être amélioré?
Quels mécanismes ont été mis en place pour promouvoir l'équité entre les sexes dans chaque ligne d'intervention ? Comment pourraient-ils être améliorés?
Les processus de suivi interne de l'intervention étaient-ils adéquats ? Quels aspects auraient dû être renforcés
Analyse du niveau d'exécution des objectifs et résultats du projet jusqu'au moment de l'évaluation.
Analyse des effets inattendus Analyse de la définition de l'objectif spécifique au problème
soulevées, les résultats du projet et analyse d'autres résultats obtenu grâce à la
l'intervention du projet.
Vérification et analyse de objectifs et évaluation du projet des stratégies suivies, contrôle interne de l’intervention et évaluation des procédés utilisés.
Analyse de l'adéquation des sources de vérification en raison de leur contribution à la structure de gestion, de leur agilité et transparence, et de leur facilité d'utilisation.
Résultats établis dans le cadre logique et résultats ajouts imprévus
Indicateurs de progrès de la objectifs et résultats et les groupes les plus vulnérables.
Mécanismes de participation, hommes et garçons qui ont bénéficié et participé dans le projet.
dans chaque ligne d'intervention pour atteindre les résultats ?
Les sources de vérification étaient-elles fiables ?
La systématisation des processus a-t-elle été encouragée ?
Vérification de la systématisation des processus.
Indicateurs d'avancement des objectifs et des résultats et indicateurs de temps d'exécution.
Nombre, type et qualité des produits et sources de
Question Critères d’évaluation Indicateurs Sources et
techniques de recueil
EFFICACITÉ ET VIABILITÉ
Était-il possible de respecter les ressources humaines et le budget
définis ?
Les budgets initialement établis dans le document de formulation ont-ils été
respectés ?
Les résultats ont-ils été atteints selon le calendrier prévu ? Le temps aurait-il pu
être mieux utilisé ?
La transformation des ressources en résultats a-t-elle été efficace ? Y a-t-il eu une coordination suffisante entre l'UGT et le SNE ? Entre le SNE et
le MEN ?
Au sein du SNE entre niveaux ? entre écoles ?
Des mécanismes de coordination interne entre et au sein des partenaires
locaux ont-ils été établis et renforcés ? ils s'utilisent? Travaillent-ils?
Des mécanismes de coordination et de communication ont-ils été envisagés
entre les écoles impliquées dans le projet ?
ont-ils été respectés ?
Comment la coordination ou le manque de coordination affecte-t-il la réalisation
des résultats du projet ? La méthode suivie pour l'exécution et le
suivi du projet a-t-elle été efficace ? Quelles mesures auraient permis d'optimiser les ressources dans ce
portée?
Analyse de l'évolution des résultats et vérification des
rythmes utilisés et de leur efficacité. résultats et le calendrier, les
ressources humaines et le budget défini dans le projet.
Évaluation de la planification et de la programmation des
activités en fonction des besoins, des objectifs et des
priorités établies.
Relation de cause à effet ou de moyen à fin entre les résultats et l'objectif et entre
les activités et les résultats.
Budget approuvé par rapport et de communication établis et
mis en œuvre.
Formules de contrôle et de surveillance de la qualité des
interventions pour l'exécution et le suivi du
projet.
Question Critères d’évaluation Indicateurs Sources et
techniques de recueil
IMPACT
Quels effets ou impact le projet a-t-il causés sur les groupes de bénéficiaires
? Anticipé? Imprévu?
Quels effets ou impact le projet a-t-il causés sur les groupes de bénéficiaires
? Anticipé? Imprévu?
Y a-t-il une interaction entre les différents impacts produits par chacune des actions ? Les actions du Projet se complètent-elles ?
Quel est l'impact genre ?
Les effets négatifs potentiels sont-ils évalués ?
Evaluation des effets de
l'intervention sur les bénéficiaires et autres directs et indirects Analyse du degré d'impact des effets du projet, ses attentes d'approfondissement et
extension des acquis et articulation avec de nouvelles priorités.
Évaluation de la mesure dans laquelle les femmes et les filles sont bénéficiaires directes et indirectes du projet, leurs formes d'organisation et leur capacité de propositions et de leadership.
Analyse du degré d'identification des effets négatifs et des solutions alternatives proposées.
Périmètre d'intervention sur les bénéficiaires directs et indirects Nombre et type d'instruments de gestion et d'organisation, et leur utilisation.
Procédures d'incorporation et de participation des femmes et des filles. des familles pour la scolarisation des filles et des garçons dans les cycles préscolaire, primaire et secondaire Renforcement des capacités et changement d'attitude pour lutter contre la violence à l'école,
Question Critères d’évaluation Indicateurs Sources et
techniques de recueil
SOUTENABIL ITÉ
Les bénéfices de l'intervention sont-ils maintenus une fois l'aide extérieure retirée ?
Les ressources nécessaires sont-elles toujours générées pour maintenir les activités ?
La capacité institutionnelle du SNE-FDT a-t-elle été positivement influencée ?
Comment les priorités et approches
Évaluation de la manière dont le projet s'inscrit dans le contexte social et politique.
Analyse de la volonté politique des institutions impliquées dans le projet.
Evaluation du renforcement des capacités managériales et institutionnelles.
Vérification de la mise en œuvre
Nombre et type de mesures appliquées
Capacités acquises Niveau d'implication et d'engagement des différents
acteurs et groupes dont le SNE et le MEN
horizontales du PACODE ont-elles été prises en compte ?
Les groupes les plus vulnérables en ont-ils bénéficié ?
Le progrès technologiquement approprié a-t-il été promu ? Quels mécanismes ont été mis en place dans chaque ligne d'intervention pour assurer la durabilité ? Comment pourraient-ils être améliorés?
Quelle preuve y a-t-il que le
différentes actions menées à partir du projet sont-elles durables ?
des mécanismes au profit des groupes vulnérables et analyse du périmètre obtenu.
Vérification de l'incorporation de mécanismes pour assurer la durabilité.
élèves, enseignants, pères et mères Niveau de mise en œuvre des mécanismes pour assurer la pérennité
Documents stratégiques et programmatiques produits, diffusés et appropriés Intérêt des autres donateurs et du
gouvernement pour le
financement des activités et des campagnes.
Question Critères d’évaluation Indicateurs Sources et
techniques de recueil Dans quelle mesure les structures
syndicales provinciales ont-elles participé à la conception, à l'exécution, au suivi et à l'évaluation du projet ? Dans quelle mesure ses structures, mécanismes et capacités ont-ils été renforcés ? Comment?
Dans quelle mesure les établissements scolaires ont-ils été renforcés ?
Augmentation du degré de participation du partenaire local et des différents groupes aux activités du projet
Augmentation du degré
d'appropriation du partenaire local et des différents groupes des objectifs à moyen-long terme du projet Degré d'engagement accru
Stratégies, plans ou mesures adoptés par le SNE
Niveau de diffusion de ces mécanismes et outils Niveaux
APPROPRIATIO
Dans quelle mesure les bénéficiaires ont-ils participé à l'ensemble du
processus ?
Dans quelle mesure le personnel enseignant s'est-il approprié et engagé
dans la lutte contre le décrochage scolaire ?
Dans quelle mesure les élèves se sont-ils appropriés la lutte contre le
décrochage scolaire ?
Dans quelle mesure les parents se sont-ils appropriés et engagés dans la lutte
contre le décrochage scolaire ? Dans quelle mesure le rôle et les efforts
du SNE dans la lutte contre la violence scolaire et le décrochage scolaire ont-ils
été rendus visibles ? Dans quelle mesure les relations de coordination et de coopération entre le SNE et le MNE se sont-elles nouées ou
renforcées ?
Avec d'autres OSC impliquées dans ces questions ou des questions connexes ?
du partenaire local et des différents groupes avec les objectifs à moyen-long terme du projet, notamment la lutte contre le décrochage scolaire, les violences faites aux enfants et le
travail des enfants ainsi que l'amélioration de l'éducation et du développement des populations de
filles et de garçons capacité du personnel enseignant à détecter les
obstacles et les difficultés secondaire des filles et des
garçons. Documents institutionnels, mécanismes et
prises de position, ainsi que d'autres signes d'engagement,
par exemple l'engagement financier du SNE et du MEN
Nombre de réunions ou
Qualité du suivi des cas d'absentéisme, difficultés, besoins de soutien scolaire, cas
de
Question Critères d’évaluation Indicateurs Sources et techniques
de recueil APPROCHE DE
GENRE EN DEVELOPPEME NT :
Dans quelle mesure l'intervention a-t-elle été pertinente par rapport aux besoins et priorités définis par les femmes et les filles ?
Dans quelle mesure l'intervention a-t-elle été alignée sur les cadres réglementaires pertinents pour l'égalité des sexes et l'autonomisation des femmes ?
Quel est l'avantage comparatif du SNE et de ses structures provinciales dans le
Niveau d'adaptation aux besoins de base et aux intérêts
stratégiques des femmes et des filles
Degré d'adéquation avec les cadres réglementaires, y compris sur la violence et le harcèlement fondés sur le genre
Engagement accru du SNE dans la promotion de la parité
Réduction de l'écart entre les sexes dans l'accès et la permanence des filles au cycle primaire et
secondaire Degré et qualité de la participation des femmes et des filles au projet
domaine de travail sur le genre par rapport à d'autres organisations ? Dans quelle mesure l'égalité des sexes et l'autonomisation des femmes et des filles ont-elles progressé grâce à l'intervention
?
Comment les avantages de l'intervention ont-ils été assurés pour les femmes et les filles ?
et autonomisation des femmes dans le SNE
Ponts et coordination avec les OSC féministes ou féminines
Participation et influence accrues des femmes (enseignantes et mères) dans la lutte contre le décrochage scolaire.
contre la violence de genre, y compris les abus sexuels sur mineurs
Rencontres et initiatives avec des organisations de
Question Critères d’évaluation Indicateurs Sources et techniques
de recueil
DURABILITÉ ENVIRONNEME NTALE :
Dans quelle mesure l'intervention a-t-elle inclus la durabilité environnementale des actions dans sa conception et son exécution ?
Dans quelle mesure l'intervention a-t-elle été alignée sur les programmes de durabilité environnementale ?
Quel est l'avantage comparatif du SNE et de ses structures provinciales dans le domaine du travail de durabilité
environnementale par rapport à d'autres organisations ?
Comment la durabilité environnementale de l'intervention a-t-elle été garantie ? Quel a été l'impact environnemental de l'intervention ? pratiques de recyclage ou de compostage, etc.) Politiques ou a-t-elle inclus le respect de la diversité culturelle et la participation des différents groupes ethniques dans sa conception et son exécution ? Dans quelle mesure l'intervention a-t-elle été alignée sur les cadres réglementaires pertinents pour le respect de la diversité culturelle et des différents groupes ethniques ? Dans quelle mesure l'intervention est-elle pertinente par rapport aux besoins et priorités définis par les différents groupes ethniques dans les pays d'intervention ?
Comment les bénéfices de
l'intervention ont-ils été garantis aux différents groupes ethniques ? Dans quelle mesure les avantages de l'intervention ont-ils atteint de manière égale tous les groupes ethniques ?
Degré d'intégration du respect de la diversité culturelle
Adoption de mesures pour l'inclusion de tous les groupes ethniques et la diversité etc.) en français, arabe et amazigh
Nombre de filles et de garçons berbères qui
JOSE GINEL SANCHEZ cert. élec. repr.
G41540204 PECLA063986408D311493623801825
07/02/2022 15:30 PAGES 18/60
CHÈQUE https://ws050.juntadeandalucia.es/verificarFirma/
6. Conditions et limites du processus d'évaluation
Comme expliqué au point 4, le contexte créé par la pandémie de COVID-19 a eu un impact profond sur la portée de l'exercice d'évaluation et sur la méthodologie finalement suivie pour le réaliser. L'annulation de la collecte de données sur le terrain en raison de la fermeture des frontières décrétée par le Maroc le 29 novembre 2021 a obligé l'évaluateur à concevoir une méthodologie alternative à travers des entretiens à distance avec des informateurs clés représentatifs des différents secteurs et participants au projet : les coordinateurs provinciaux du SNE, directeurs provinciaux du MNE, parents d'élèves, enseignants, directeurs d'école et prestataires (formation, études et stratégies, optique).
Comme on peut le comprendre, les groupes d'observation et de discussions directes et les entretiens en face à face permettent de recueillir des informations qualitatives que les pièces justificatives ne peuvent fournir, notamment sur l'impact des actions. Aussi, en raison d'une série de facteurs, dont l'accès limité à Internet dans le nord du Maroc et la période de vacances du secteur de l'éducation, seul un quart des entretiens demandés ont pu être réalisés en deux appels de groupe. Cela n'a pas permis d'atteindre le nombre prévu d'entretiens avec les informateurs clés.
Les difficultés rencontrées par l'évaluateur pour obtenir des entretiens à distance en décembre et janvier 2022, ont dû être compensées par une plus grande emphase sur l'analyse
film documentaire. Malheureusement, en raison de la faiblesse du système statistique, cet aspect n'a pas été aussi productif que souhaité, l'impact en termes de réduction du décrochage et de l'échec scolaire étant ce qui aurait renseigné sur le degré d'ampleur des objectifs spécifiques, difficile mesurer.
Concernant les indicateurs quantitatifs de résultats, malgré les efforts déployés par les équipes du SNE - FDT pour numériser et envoyer les listes de bénéficiaires, les pièces justificatives ont nécessité un examen approfondi et laborieux. Les listes de présence n'étaient pas ventilées par sexe et les noms des élèves étaient parfois répétés, ce qui a obligé l'évaluateur à revoir tous les noms pour éviter les doublons dans le décompte.
Par contre, il faut noter que les indicateurs de réalisation des objectifs spécifiques ne sont pas disponibles.
Comme en témoigne la préparation de la situation de référence, les données quantitatives sur le nombre total d'inscriptions dans chaque école, le nombre d'abandons, d'absences et de redoublements ne sont pas toujours accessibles. Il n'existe pas de système uniforme et fiable de comptage et de suivi des cas de risque de décrochage scolaire dans chaque centre, ce qui rend difficile l'évaluation de l'impact des activités du projet.
7. Techniques utilisées :
Les techniques finalement utilisées sont décrites ci-dessous, pour s'adapter aux circonstances décrits précédemment après avoir annulé les entretiens en face-à-face avec les informateurs clés et les groupes de discussion en face-à-face avec les bénéficiaires, ainsi que l'observation sur le terrain.
Les techniques de collecte de données utilisées étaient les suivantes :
8. Récupération et analyse documentaire :
La documentation clé disponible générée par et sur le projet, à la fois qualitative et quantitative, a été compilée et analysée. Parmi ceux-ci, il convient de mentionner :
• La formulation du projet, y compris sa matrice et son budget.
• L'état d'avancement du rapport final du projet et ses sources de vérification
• La demande et l'approbation de la modification des écoles
• La demande et l'approbation de la prolongation du délai d'exécution
• Les documents produits par le projet :
- Baseline du projet par le Dr Moutaouakil Mehdi.
- Guide pratique pour l'amélioration du vivre-ensemble et la réduction de la violence en milieu scolaire par Maha Raissouni et Karima Haddi pour ICG International Cooperation and Management SL (juillet 2021). ÿ Stratégie de lutte contre le décrochage scolaire comme
moyen de lutte contre le travail des enfants. Par ICG International Cooperation and Management SL (juillet 2021)
- Stratégie de communication et de plaidoyer et plan de communication, par Maha Haissouni et Mouni Mohammed pour ACETRE (juillet 2021).
• Rapports d'activités de formation des partenaires locaux avec photos:
- Rapport de formation sur le travail des enfants à Larache et lancement (19 décembre 2020).
- Rapport de formation sur la pédagogie compensatoire.
- Rapport de formation sur la communication (13 juin à Larache et 29 mai à Ouezzane).
- Rapport sur la formation du Forum des jeunes (15 et 16 juillet 2021).
• Les contenus de formation (programmes et slides) des 3 formations :
- Support de formation sur le travail des enfants (19 décembre 2020 Larache, donné par Moutaouakil Mehdi)
- Matériel de formation en pédagogie compensatoire (20, 21, 28 février 2021 dans 3 provinces, donné par Moutaouakil Mehdi)
- Support de formation à la communication (29 et 30 mai, 13 juin 2021 à 3 provinces, dada par Hicham El Guennouni)
- Programme et matériel de formation pour le Forum des jeunes sur le leadership (15 et 16 juillet Larache).
• Les listes de présence des enseignants aux 3 formations et au forum des jeunes : ÿ formation sur le travail des enfants (19 décembre 2020 Larache)
- formation en pédagogie compensatoire (20, 21, 28 février 2021 dans 3 provinces) - formation en communication (29 et 30 mai, 13 juin 2021 dans 3 provinces) - Forum des jeunes sur le leadership (15 et 16 juillet, Larache).
• Liste des élèves bénéficiaires du programme de don de verres correcteurs dans la
• Liste des élèves bénéficiaires du programme de don de verres correcteurs dans la