SlideShare une entreprise Scribd logo
1  sur  55
Télécharger pour lire hors ligne
MoEAC | Impact Study of the Policy on PMLP 4
Data Must Speak (DMS)
Global Initiative
Introduction
UNICEF
September 2021 | Africa Evidence Week 2021
© UNICEF/UN0318715/Frank Dejongh
Motivation
Globally, education systems regularly collect large amounts of data from
schools. However, too often these data aren’t actively used to improve learning
or education management.
Overview
Launched in 2014, and co-funded by the Global Partnership for Education (GRA,
KIX), Hewlett Foundation and NORAD.
DMS aims to strengthen the use of data to:
i. Enhance governance and management of education systems
ii. Enhance social accountability and demand for high-quality education at local
level
iii. Improve global knowledge regarding what works, or not, for community
participation and the use of data for improved equity and learning.
Active in 17 countries, 13 of which are in Africa:
• Angola, Burkina Faso, Chad, Cote d’Ivoire*, Ethiopia*, Ghana*, Madagascar,
Mali*, Namibia, Niger, Tanzania*, Togo, Zambia (*=research only)
Overview
• Demand fromthe Ministry of
Education / set up national technical
team
• Baseline analysis
• Consultations to identify priorities for
support in the light of the needs.
• “A-la-carte” activities selected for
implementation
• Action plan implemented directly by
the Ministry of Education
Implementation Modality Guiding Principles
• Flexibility and national ownership
• Sustainability
• Synergy
• A “learning-by-doing”approach
• Peer-to-peer (South-South) Learning
• Scalability and replicability
Common “A la carte” Activities
• Strengthening EMIS and data
harmonization
• Developing indices and formulas to
support government resource allocation
and decision-making
• Developing profile cards/dashboards to
feed user-friendly education data back to
regional, district, and school level for
decision-making
• Simplified school report cards for
community engagement and social
accountability to improve education
Examples: Indices
Nepal: The Equity Index captures disparities in
education outcomes (access, survival and
learning) across different socio-demographic
groups (gender, location, dalit/non-dalit,
disability, wealth, mother’s education)
The Philippines: Teacher Hardship Index using
criteria based on a survey of teachers (see pie
chart). Teachers from the 15% of public
elementary schools and 7% of public secondary
schools (those in most difficult context) will
benefit from the Special Hardship Allowance
No electricity,7%
Poverty incidence,
7%
No water, 4%
No internet, 4%
Temporary learning
spaces, 2%
Human violence,
14%
Travel cost to
Division, 14%
Travel timeto
Division, 48%
Example: Profile Cards / Dashboards
• Prepared for regional, district, other sub-administrative
units, school, and community level
• Highlight results of key indicators pertaining to:
• Learning outcomes
• Progression/repetition/dropout
• Enrollment and characteristics of learners
• Teachers and physical facilities
• Learning materials and financial resources
• Provide comparisons of performance against:
• National standards
• National/regional/district averages
• Equity considerations
• Used to prioritize financial and pedagogical support
DMS Knowledge Generation Activities
• Development of community
engagement guidelines with UNICEF
C4D colleagues
• Guidelines
• Practical implementation guide
• Toolbox
• Evaluation related to DMS priorities
• Knowledge sharing through webinars,
publications, and posters
What have we learned so far?
• Analysis of community engagement in 6 countries found that community
participation is associated with:
• Reduction of dropouts
• Improvement of exam pass rates
• Better learning environment (including better Nutrition, WASH and heath in school facilities)
• A 2018-2019 formative evaluation of DMS across five countries found:
• DMS has improved access to information about education services and outcomes, though there have
been some bottlenecks in the transfer of DMS processes and ownership from central to lower levels
• Evidence to suggest that the availability of increased information through the school profile cards has
• Increased community understanding of school priorities and needs / raised awareness of the
generally low levels of learning / led to greater community participation in decision-making in some
school districts;
• Not yet translated into actual power to hold schools and school districts more accountable for
results, or for providing the resources required for the schools to function well
• Indices were successfully developed and incorporated into government planning and budget allocation
What have we learned so far?
Impact evaluation in Zambia to measure the effect of
community trainings on the content and use of the
community-friendly school profiles (2018-2019)
• Positive impacts on intermediate outcomes
• Increased understanding of the profile cards among
parents/caregivers (75% vs 50%)
• Increased knowledge among educators/PTAs about the status of
their school and improvement areas
• Increase in parents/caregivers’ participation in at least one PTA
meeting (8 pp)
• Qualitative reports of using profile cards to set priorities, increased
motivation among teachers and students, greater willingness by
community members to contribute financially
• No significant impacts (within one year) on longer-term outcomes
• Identified a need to address gaps in community capacity to engage in
school improvement planning as well as issues of distrust/inequity
within community participation structures
Data Must Speak (DMS)
Positive Deviance Research
Introduction
UNICEF Office of Research
September 2021 | Africa Evidence Week 2021
© UNICEF/UNI297252/Schermbrucker
• Same Guiding Principles (DNA) as for the other DMS
components & also focused on Foundational Literacy
and Numeracy
• Objective: Finding out and understanding positive
deviant behaviors/practices in best performing schools
and ways to scale them in more schools
• Methodologies: Quantitative research, Behavioral
science, Implementation research, & Scaling science
• Co-funded by Internal UNICEF resources (global and
country level), Hewlett Foundation, KIX (IDRC/GPE),
NORAD, Schools2030, and Jacobs Foundation
• Tapping on UNICEF unique fieldpresence (900
education staff) and theirtrusted partnerships w/
Ministries
13 participating countries
in Africa, Asia & Latin America
Brazil | Burkina Faso | Cote d’Ivoire | Ethiopia | Ghana | Lao PDR
Madagascar | Mali | Nepal | Niger | Tanzania | Togo | Zambia
DMS Research Component
It is an innovative methodology
used to understand what makes
certain schools perform better
than others even though they
operate in the similar context
& with the same resources, by
analyzing their behaviors and
practices.
What is Positive Deviance?
Argentina – By improving the relationship between
communities and schools, students are much more
likely to graduate primary school
Dura, L. & Singhal, A. (2009)
Namibia – Students learning outcomes improved
when head-teachers act as role-models and foster a
strong team spirit
UNICEF (2015)
U.S.A – When receiving positive feedback from
teachers, parents, and friends, students with learning
disabilities are much less likely to drop-out
Singhal, A. (2013)
Practices &
Behaviors
School Leadership;
Relations between
Teachers & School
Leaders; Teachers
& Teachers
Classroom
Practices
Teachers &
Students Relations
& Dynamics
School &
Community
Relations &
Dynamics
School/District
Relations &
Dynamics
Domains of Practices/Behaviors under Study
Co-Creation
Design & Co-
Implementation
Approach
Ministry of
Education
(central &
decentralized)
Teachers &
School Leaders
Communities,
Parents
Development
Partners &
CSOs
Local &
International
Academics
Aparticipatoryresearchprojectfromand
forministries’ officials,schoolleaders,
teachers,communities, and children
Co-Creation & Co-Implementation from the Outset
Co-Creation
Design & Co-
Implementation
Approach
Ministry of
Education
(central &
decentralized)
Teachers &
School Leaders
Communities,
Parents
Development
Partners &
CSOs
Local &
International
Academics
Co-Creation & Co-Implementation from the Outset
Improve research uptake
Research is contextualized
Linking research to policy -
answering national education
priorities
Ensure buy-in from the outset
Stage 1
Analysis of resources and context
associated with school
performance
[Quantitative Research]
Stage 2
Identification of Positive Deviant
Schools and School Typology
[Quantitative Research]
Stage 3
Understanding School-level Positive
Deviant Behaviors/Practices
[Behavioral Science]
Stage 4
Investigating Levers for
Optimum Scale
[Participatory Implementation
Research & Scaling Science]
Stage 5
Country-level Knowledge Use &
Global Mobilization
Stage 0
Global Methodological Review
Country-Tailored Research Methodology
Valuing Country-Level Capacity and Solutions
Grassrootsolutions to
nationaleducationissues
Strengthening in-country
technicalcapacity to manage
education data and generate
evidence
Leveragingnationalexisting
datasets to analyze the education
ecosystem
Listening to schools to identify
localpositive deviantbehaviors and
practices in their context
Thank you!
Annika Rigole Education Specialist | UNICEF Eastern & Southern Africa Regional Office | arigole@unicef.org
Renaud Comba DMS Research Manager | UNICEF OoR | rcomba@unicef.org
© UNICEF/UNI232840/Bridger
26
Data Must Speak:
Namibia Country Experience
15 September 2021
[Country-Level Situation on Education,
Research, and Data]
Source: EMIS Annual Education Census 2020
❑ Officially joined DMS in July 2018
❑ Built on strong foundations & work in strengthening EMIS architecture and functionality
❑ DMS sharpened the focus on improving quality, timeliness and use of data for planning,
budgeting and decision making in education
❑ Key results in EMIS system strengthening:
❑ This year’s data, this year! Twice a year!
❑ Decentralized data collection, quality assurance to all 14 regions.
❑ Incorporated Washington Group Questions on disability into AEC in 2020
❑ Incorporated module on EMIS in school board training (social accountability & school governance)
❑ Ring-fenced funding for EMIS and OpenEMIS through Ministry’s own budget
❑ Linked EMIS data to payroll data 
identified ghost teachers and saved N$
~20 million annually
❑ Formulated School Grant Policy including
school grant formula
❑ Priorities moving forward: fiscal
management and fiscal incidence, post
provisioning and spending equity
Inspired by Positive Deviant Study (2015), NEAS looked at:
1. Learning outcomes trend analysis
2. Cont. Assessment system analysis
3. Empirical analysis of socio-economic determinants of
education
❑ All three components have a DMS dimension
❑ Analytical framework for improved links between EMIS
and exam/SAT data
❑ Learner and teacher attendance data for improving
outcomes
❑ EMIS lifecycle: a fair balance of process – people – technology
❑ Sensitization is key: needs to be both vertical (including managers)
and horizontal (including all programmes in education where data is
critical to work)
❑ Bottom-up approach: Sensitization must include parents, teachers,
learners and the wider community
❑ Resources and formalisation:Adequate time, efforts and financial
resources must be ring-fenced and to ensure sustainability
❑ GRN ownership and leadership
❑ Built ECD-EMIS from scratch using EMIS as a
model (interoperable)
❑ ECD-MIS custom built, decentralized and
web-based.
❑ National ECD Surveys carried out in 2018 and
2019 (only rapid response survey in 2020)
❑ Captures information about ECD centres,
enrolment (GER and NER), edu-carers,
nutrition, health & disabilities, learning
environment, fees, support.
❑ Currently developing ECD registration and
assessment modules
Accelerating growth of ECD centres since independence in
Namibia
❑ Child protection: producedViolenceAgainst Children
(VAC) Study (2019)
❑ Data-2-Action Plan using DMS principles (2020)
❑ Child welfare: carried out a data landscaping analysis
(2020)
❑ Formulated DMS Action Plan and integrated key activities
in the Ministry’s rolling work plan
Awareness of
importance data
DMS sensitization
workshop with
Senior Mgmt.
Increase
investment in
CW/CP data
Use of data
Comprehensive
audit of CW
datasets (2010 to
date)
Increase use of
CW/CP data
Fragmentation
of data
DMS
interoperability
workshop
(DHIS-2)
Improve linkages
between
CW/CP and
GBV data
Issue Action Result
❑ Lifecycle approach: linking ECD data to formal education data
❑ Interoperability:
❑ Design ECD MIS and EMIS so they speak to each other
❑ DHIS-2:child welfare/protection and GBVPU data
❑ Awareness of the importance of data is expected to increase use of
data and resources to operate admin data in child welfare/protection
Components of a mature administrative data landscape piloted in
Namibia
Initiative Data Must Speak Togo
TCHEWAFEI A. Badja, Economiste et Spécialiste
en Planification et gestion de l’éducation
République Togolaise
Ministère des enseignements primaire, secondaire, technique et de l’artisanat
Direction de la planification de l’éducation et de l’évaluation
Plan de Présentation
I Analyse existant, option du Togo et étapes franchies
II Principaux résultats obtenus
III Perspectives et prochaines étapes
IV Leçons tirées de l’expérience
Analyse existant, option du Togo et étapes franchies
Existence du Tableau de
Bord (TdB) école mais :
X Juste pour le primaire
X Pas automatisé
X Très technique et peu adapté
pour une bonne
compréhension par les
acteurs terrain
X Parlait juste au niveau central
X Ne parlait pas niveau local
Pertinence de DMS :
✓ Renvoie l’information
compréhensible par le plus
grand nombre d’acteurs a
tous les différents niveaux du
système
✓ Améliore le pilotage du
système à tous les niveaux
✓ Contribue à l’amélioration de
la qualité des données
✓ Renforce l’information, la
responsabilisation et la
redevabilité des acteurs
2014
Lancement initiative DMS :
• Ancrage institutionnel
• Analyse de l’existant
• Identification des priorités et
choix du pays
Analyse existant, option du Togo et étapes franchies
2015-2017 2018-2019 2020-2021
• Stabilisation modèles TdB JE, CEG, lycée, IESG
• Automatisation TdB JE, CEG, lycée et IESG avec les
données d’examen (CEPD, BEPC, BAC2)
• Rédaction guides utilisation TdB JE, CEG, lycée et IESG
• Impression et dissémination TdB et guides (tous étab.
Scol.)
• Formation des acteurs
• Stabilisation des modèles de TdB
simplifiés (communautaires)
• Lancement composante
recherche initiative DMS : atelier
de cocréation écoles modèles
positives
• Stabilisation modèles de TdB pour le EP et IEPP
• Automatisation des TdB EP et IEPP avec CEPD
• Rédaction guides utilisation TdB EP et IEPP
• Impression et dissémination TdB et guide
• Formation des acteurs/utilisateurs
• Autres (révision des textes sur les GOGEP et COGERES)
Principaux résultats obtenus – Assistance Technique
Fusion des bases de données SIGE et des résultats aux examens (CEPD,
BEPC et BAC2)
Impression et diffusion nationale régulière des Tableaux de Bord (JE, EP,
CEG, LYCEE) dans tous les établissements scolaires du Togo
Formations des inspections et des régions intègrent l’utilisation des TdB
Conception des modèles de TdB simplifiés
Principaux résultats obtenus – Assistance Technique
Tableau de Bord
école/établissement
✓ Localisation de
l’établissement
✓ Contexte de l’établissement
✓ Effectifs des élèves et
résultats à l’examen
✓ Moyen de l’établissement
✓ Comparaison des résultats et
des moyens de l'école à ceux
de l'IEPP, de la DRE et du
Pays
Tableau de Bord
inspection
✓ Données générales
✓ Effectifs d’élèves et résultats
à/aux l’examen(s)
✓ Moyens
✓ Comparaison de la situation à
celle de la DRE et du pays
✓ Répartition des écoles en
fonctions de leurs indices de
résultats et de
contexte/moyens
C. INDICES DE CONTEXTE/MOYENS ET DE RESULTATS
Norme
98 2
Pourcentage de non-redoublants
88 2
Indice de parité du taux de rétention
98 2
Taux de rétention au primaire
98 2
98 2
98 2
Eff moins de 40/section
Niv Nb %
CP1 0 0
98 2 CP2 33
98 2 CE1 30
98 2 CE2 0
98 2 CM1 37
Pourcentage d'élèves ayant une place assise
98 2 CM2 29
Pourcentage de salles de classe en matériaux permanents
98 2 Total 129 61
Pourcentage d'élèves dans des salles de classe de moins de 40 élèves
60,6 61,3 48,6 49 98 2
48
100 100 100
96 94 95 95
100
92 99 97
59
67
99
81
88
0
100 94
79 78
Indice de parité pour le pourcentage de non redoublants
Pourcentage d'élèves qui partage leur
enseignant avec moins de 40 élèves
56 52 79 79
Pourcentage d'enseignants fonctionnaires (moyenne IEPP: écoles
publiques et comm.)
50 100 100
52 57
100
DRE MARITIME 0,90 0,89
IEPP VO_NORD 0,60 0,86
0,4
1,4
1,0
5. Comparaison des résultats et des moyens de l'école à ceux de l'IEPP, de la DRE et du Pays
IEPP VO_NORD
EPP ATTIVE APEYEME / 20405P016P
Pourcentage d'élèves ayant un manuel de lecture (moyenne IEPP:
écoles pub et comm.)
34 66 59 52
Pourcentage d'élèves ayant un manuel de calcul (moyenne IEPP:
écoles pub et comm)
19 56 55 54
DRE MARITIME
TOGO
100 95 98 98
Taux de réussite au CEPD
100 82 85 83
A. Ressources matérielles et humaines
EPP ATTIVE APEYEME / 20405P016P
IEPP VO_NORD DRE MARITIME
TOGO
EPP ATTIVE APEYEME / 20405P016P
0,9 0,3
Efficience
Contexte /
moyens
Résultat
Indice de parité du taux de réussite au CEPD
TOGO 0,64 0,87 1,4
EPP
IEPP DRE TOGO
0,0 0,1 0,2 0,3 0,4 0,5 0,6 0,7 0,8 0,9 1,0
Indice global de contexte, moyens
EPP
IEPP DRE TOGO
0,0 0,1 0,2 0,3 0,4 0,5 0,6 0,7 0,8 0,9 1,0
Indice global de résultat
100
96
59
67
100
100
0 20 40 60 80 100
Indice de parité pour le pourcentage de
non redoublants
Pourcentage de non-redoublants
Indice de parité du taux de rétention
Taux de rétention au primaire
Indice de parité du taux de réussite au
CEPD
Taux de réussite au CEPD
EPP ATTIVE APEYEME / 20405P016P IEPP VO_NORD Norme
Indicateurs de résultat
19
34
50
56
100
0
60,56338028
0 20 40 60 80 100
Pourcentage d'élèves ayant un manuel de
calcul (moyenne IEPP: écoles pub et comm)
Pourcentage d'élèves ayant un manuel de
lecture (moyenne IEPP: écoles pub et
comm.)
Pourcentage d'enseignants fonctionnaires
(moyenne IEPP: écoles publiques et comm.)
Pourcentage d'élèves qui partage leur
enseignant avec moins de 40 élèves
Pourcentage d'élèves ayant une place assise
Pourcentage de salles de classe en
matériaux permanents
Pourcentage d'élèves dans des salles de
classe de moins de 40 élèves
Indicateurs de moyens
EPP
IEPP
DRE TOGO
0,0 0,2 0,4 0,6 0,8 1,0 1,2 1,4 1,6
Indice global d'efficience =Indice global de résultat/indice global de contexte,moyens
- efficient + efficient
Exemple TdB école primaire
Code: 30307P076P
DRE :
Inspection :
Ecole :
Statut :
Directeur :
Année scolaire: 2019-2020
IM GS5
IM GS5
IM GS3
IMG
S3
IMG
S3
IMG
S3
IMG
S3
IMG
S3
IM GS5
IM GS4
IM GS5
IM GS4
20
15
18
8
7
84
0
IM GS4
0
IMG
S5
PLATEAUX
AMOU_SUD
Public
DA
KERSE A
TSU
I MG S1
I MG S2
I MG S2
1. Contexte de l'école
-----------
Secrétariat Général
-----------
Direction de la Planification de
l'Education et de l'Evaluation
16
I MG S2
I MG S2
IMG
S1
FICHE ECOLE PRIMAIRE
EPP ADJAHOUN TODJI / 30307P076P
2. Effectifs d'élèves et résultats au CEPD
I MG S2
Ministère des Enseignements
Primaire, Secondaire, Technique
et de l'Artisanat
CP 1 CP 2
Exemple TdB simplifié école primaire (communautaire)
Liste des quinze écoles les "moins efficientes"
Code Nom Indicateurs de résultats le plus faible
1 30813P014P EPP KPELE TUTU CENTRALE Taux de rétention dans le cycle
2 30813P011P EPP AKATA SONAPH Taux de rétention dans le cycle
3 30813P017P EPP KPELE TUTU ZIONOU Taux de rétention dans le cycle
4 30813P037P EPP KPELE GOVIE CENTRALE Taux de rétention dans le cycle
5 30813P029P EPP KPELE AMETO Taux de rétention dans le cycle
6 30813P053P EPP KPELE GODZO Indice de parité de rétention
7 30813P092P EPP KPELE ATIME DODI Indice de parité de réussite au CEPD
8 30813P058P EPP KPELE KPELEDJI Taux de rétention dans le cycle
9 30813P081P EPP KPELE BEME Taux de rétention dans le cycle
10 30813P083P EPP KPELE BEME TOUSSI ALATI Taux de rétention dans le cycle
11 30813P034P EPP KPELE KPONVIE Taux de rétention dans le cycle
12 30813P073P EPP KPELE ADETA ZONGO G/A Indice de parité de réussite au CEPD
13 30813P100C EPC AVEGBADJE Taux de rétention dans le cycle
14 30813P105C EPC SAINTE TRINITE KPELE TSIKO Indice de parité de rétention
15 30813P055P EPP KPELE GOUDEVE G/B Taux de rétention dans le cycle
Liste des 5 écoles les "plus efficientes"
1 30813P095P EPP KPELE WOUGBA
2 30813P090P EPP KPELE YAHA
3 30813P067P EPP KPELE ELEME TODZI
4 30813P020P EPP KPELE TUTU TODZE
5 30813P045P EPP KPELE ASSOGBE
42%
25%
15%
49%
27%
27%
56%
30%
28%
20%
41%
29%
25%
0%
valeur
30%
IEPP: KOZAH_NORD
5. Répartition des écoles en fonctions de leurs indices de résultats et de contexte/moyens
KPELE
0,41
0,64
0,87
1,11
0,21 0,43 0,65 0,87
Indice
de
résultat
Indice de contexte/moyens
Exemple TdB simplifié école primaire (communautaire)
Étape 1
Analyse Quantitative:
Identification des ressources et du
contexte associés aux
performances scolaires
Étape 2
Typologie des Ecoles:
Identification des écoles « modèles
positives »
Étape 3
Sciences du Comportement:
Identification des
comportements/pratiques
« modèles positifs » au sein des
écoles sélectionnées
Étape 5
Utilisation des résultats
au niveau national et
dissémination à toutes les
parties prenantes
Étape 0
Analyse documentaire et
méthodologique globale
Étape 4
Recherche sur la Mise en Œuvre:
"Comment" mettre à l'échelle les
pratiques/comportements modèles
positifs (Science de la mise
à l’échelle)
Les Étapes de la Recherche au Togo
Utilisant les données SIGE et examen de 2015 à 2021 pour toutes les écoles primaires et
secondaire publiques et communautaires avec comme indicateur de performance: (1) le
taux de promotionen classe supérieur et (2) les réussiteaux examens.
Etape 1 – Analyse Quantitative
1
Au primaire, le taux de
promotion des filles est 1.9
points de pourcentage (pp)
inférieur a celui des garçons.
2
Quand l’enseignant est une
femme le taux de promotion des
filles est 1.4 pp supérieur a celui
des garçons
3
L’existence de latrine dans
l’école permet de réduire la
différence de taux de promotion
entre filles et garçons de 0.4 pp.
4
Quand la taille de la classe est
plus grande, le taux de
promotion est plus faible.
5
Quand l’enseignant est aussi
directeur, le taux de promotion
est plus faible (-0.6 pp).
Etape 1 – Analyse Quantitative
6
Les classes multi-niveaux ont un
taux de promotion plus faible (-
0.7 pp).
7
Plus de réunions avec l’APE est
associé a un meilleur taux de
promotion (+1 pp pour une
réunion/mois comparé a 0).
8
Les enfants de fonctionnaire ont
des taux de promotion
beaucoup plus élevés que les
autres (+3.4 pp) => rôle
important du milieu familial.
9
Les classes avec un manuel par
élèves et une place assise par
élève ont un taux de promotion
1.3 pp plus élevée que la
moyenne.
Perspectives et prochaines étapes
Initiative DMS
✓ Automatisation des Tableaux
de Bord simplifiés (destiné
aux communautés)
✓ Test d’utilisation des
Tableaux de Bord simplifiés
✓ Impression et dissémination
des Tableaux de Bord
simplifiés
✓ Formations à l’utilisation des
Tableaux de Bord simplifiés
DMS Recherche
✓ Conception d'indices
scolaires et
calcul/automatisation des
indices
✓ Identification des écoles
modèles positives
✓ Identification des
comportements et pratiques
modèles positifs (y compris
sur l'engagement
communautaire)
Leçons tirées de l’expérience
Leçonsd’ordretechnique:
✓ Consolidationdelacollaborationentrelesdifférentsservicesproducteursetutilisateursdedonnées.
✓ Améliorationduprocessusdecollecteetlecontrôledelafiabilitédesdonnées(SIGE)ainsiquel’importancedelier
lesbasesdedonnéesentres elles.
✓ LesdonnéesderésultatsTDBsontutiliséespourlediagnosticdelaqualitédansduprogrammed’appuiaupilotage
delaqualitédel’éducation,facilitantlasynergiedesinterventionsdanslesecteur.
Leçonsd’ordreinstitutionnel:
✓ Coordinationentrelesdifférentesstructuresimpliquéesdanslaproductionetl’utilisationdesTableauxdeBord
✓ Importanceduprocessusdeco-créationdelarechercheavec touteslespartiesprenantesdesledébutduprojet.
✓ Disponibilitédesressourceshumaines…(tempsconsacré..)
✓ Miseenplacepararrêté ministérield’uneéquipetechniquepourharmonisationdesbasesdedonnéesdusecteur +
s’appuyersurlesstructuresdéjàexistantespourlarecherche
Leçonsd’ordrestratégique:
✓ Appropriationdel’utilisationdesTdBécolesdansl’élaborationdesPlansdedéveloppementd’Ecole
Merci de votre attention
République Togolaise
Ministère des enseignements primaire, secondaire, technique et de l’artisanat
Direction de la planification de l’éducation et de l’évaluation
MoEAC | Impact Study of the Policy on PMLP 55

Contenu connexe

Similaire à Strengthening and Promoting Education Data Systems and Utilization in Africa: Lessons from the Data Must Speak Global Initiative

Td rs revue externe programme education 16 dec 2013 final -
Td rs revue externe programme education 16 dec 2013   final -Td rs revue externe programme education 16 dec 2013   final -
Td rs revue externe programme education 16 dec 2013 final -assotanmia
 
Intégration Pédagogique des Tic en CI
Intégration Pédagogique des Tic en CIIntégration Pédagogique des Tic en CI
Intégration Pédagogique des Tic en CIdidando_ballet
 
Intégration pédagogiques des tic
Intégration pédagogiques des ticIntégration pédagogiques des tic
Intégration pédagogiques des ticdidando_ballet
 
Intégration pédagogiques des tic
Intégration pédagogiques des ticIntégration pédagogiques des tic
Intégration pédagogiques des ticdidando_ballet
 
Education : Parce que tout commence par là
Education : Parce que tout commence par làEducation : Parce que tout commence par là
Education : Parce que tout commence par làfrancoisfillon
 
Pe10mars2014
Pe10mars2014Pe10mars2014
Pe10mars2014JC Linier
 
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...GROLLEAU Anne-Céline
 
Presentation de mJangale Forum Mondiale de la Francophonie 2015
Presentation de mJangale Forum Mondiale de la Francophonie 2015Presentation de mJangale Forum Mondiale de la Francophonie 2015
Presentation de mJangale Forum Mondiale de la Francophonie 2015SenMobile
 
Côte d'Ivoire: les statistiques scolaires 2013-2014
Côte d'Ivoire: les statistiques scolaires 2013-2014Côte d'Ivoire: les statistiques scolaires 2013-2014
Côte d'Ivoire: les statistiques scolaires 2013-2014Antoine MIAN
 
Mawete pratiques d'enseignement avec les tic au congo
Mawete pratiques d'enseignement avec les tic au congoMawete pratiques d'enseignement avec les tic au congo
Mawete pratiques d'enseignement avec les tic au congoROCARE / ERNWACA
 
La reforme de notre système éducatif
La reforme de notre système éducatifLa reforme de notre système éducatif
La reforme de notre système éducatifleraptor
 
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...Ardesi Midi-Pyrénées
 
La mesure du bien être des sociétés
La mesure du bien être des sociétésLa mesure du bien être des sociétés
La mesure du bien être des sociétésyoussefmm
 

Similaire à Strengthening and Promoting Education Data Systems and Utilization in Africa: Lessons from the Data Must Speak Global Initiative (20)

Td rs revue externe programme education 16 dec 2013 final -
Td rs revue externe programme education 16 dec 2013   final -Td rs revue externe programme education 16 dec 2013   final -
Td rs revue externe programme education 16 dec 2013 final -
 
Maputo recommendations fr
Maputo recommendations frMaputo recommendations fr
Maputo recommendations fr
 
Intégration Pédagogique des Tic en CI
Intégration Pédagogique des Tic en CIIntégration Pédagogique des Tic en CI
Intégration Pédagogique des Tic en CI
 
Intégration pédagogiques des tic
Intégration pédagogiques des ticIntégration pédagogiques des tic
Intégration pédagogiques des tic
 
Intégration pédagogiques des tic
Intégration pédagogiques des ticIntégration pédagogiques des tic
Intégration pédagogiques des tic
 
Education : Parce que tout commence par là
Education : Parce que tout commence par làEducation : Parce que tout commence par là
Education : Parce que tout commence par là
 
Pe10mars2014
Pe10mars2014Pe10mars2014
Pe10mars2014
 
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...
Le dispositif « Pédagogie & TICE » : une offre mutualisée de services en péda...
 
Rapport de rendement 2017 2018
Rapport de rendement 2017 2018Rapport de rendement 2017 2018
Rapport de rendement 2017 2018
 
Presentation de mJangale Forum Mondiale de la Francophonie 2015
Presentation de mJangale Forum Mondiale de la Francophonie 2015Presentation de mJangale Forum Mondiale de la Francophonie 2015
Presentation de mJangale Forum Mondiale de la Francophonie 2015
 
Côte d'Ivoire: les statistiques scolaires 2013-2014
Côte d'Ivoire: les statistiques scolaires 2013-2014Côte d'Ivoire: les statistiques scolaires 2013-2014
Côte d'Ivoire: les statistiques scolaires 2013-2014
 
Mawete pratiques d'enseignement avec les tic au congo
Mawete pratiques d'enseignement avec les tic au congoMawete pratiques d'enseignement avec les tic au congo
Mawete pratiques d'enseignement avec les tic au congo
 
Les échos de la pedagogie de l'ENTPE - novembre 2020
Les échos de la pedagogie de l'ENTPE - novembre 2020Les échos de la pedagogie de l'ENTPE - novembre 2020
Les échos de la pedagogie de l'ENTPE - novembre 2020
 
La reforme de notre système éducatif
La reforme de notre système éducatifLa reforme de notre système éducatif
La reforme de notre système éducatif
 
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...
Les espaces Cyber-base et l'école : quels rôles et quels périmètres d'interve...
 
Critères de qualité
Critères de qualitéCritères de qualité
Critères de qualité
 
Rapport de rendement 2016 2017 du CAHM
Rapport de rendement 2016 2017 du CAHMRapport de rendement 2016 2017 du CAHM
Rapport de rendement 2016 2017 du CAHM
 
La mesure du bien être des sociétés
La mesure du bien être des sociétésLa mesure du bien être des sociétés
La mesure du bien être des sociétés
 
2019 04 les echos de la pedagogie avril 2019
2019 04 les echos de la pedagogie avril 20192019 04 les echos de la pedagogie avril 2019
2019 04 les echos de la pedagogie avril 2019
 
2019 04 les echos de la pedagogie avril 2019
2019 04 les echos de la pedagogie avril 20192019 04 les echos de la pedagogie avril 2019
2019 04 les echos de la pedagogie avril 2019
 

Plus de UNICEF Office of Research - Innocenti

LAUNCH: Intersections between violence against children and violence against ...
LAUNCH: Intersections between violence against children and violence against ...LAUNCH: Intersections between violence against children and violence against ...
LAUNCH: Intersections between violence against children and violence against ...UNICEF Office of Research - Innocenti
 
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...UNICEF Office of Research - Innocenti
 
What Makes Me? Core capacities for living and learning. Presentation at WISE ...
What Makes Me? Core capacities for living and learning. Presentation at WISE ...What Makes Me? Core capacities for living and learning. Presentation at WISE ...
What Makes Me? Core capacities for living and learning. Presentation at WISE ...UNICEF Office of Research - Innocenti
 
Webinar Summary: Intersections Between Violence Against Children and Violence...
Webinar Summary: Intersections Between Violence Against Children and Violence...Webinar Summary: Intersections Between Violence Against Children and Violence...
Webinar Summary: Intersections Between Violence Against Children and Violence...UNICEF Office of Research - Innocenti
 
Intersections between Violence Against Children and Women: Prevention and Res...
Intersections between Violence Against Children and Women: Prevention and Res...Intersections between Violence Against Children and Women: Prevention and Res...
Intersections between Violence Against Children and Women: Prevention and Res...UNICEF Office of Research - Innocenti
 

Plus de UNICEF Office of Research - Innocenti (20)

LAUNCH: Intersections between violence against children and violence against ...
LAUNCH: Intersections between violence against children and violence against ...LAUNCH: Intersections between violence against children and violence against ...
LAUNCH: Intersections between violence against children and violence against ...
 
Harmful Practices - Project Brief
Harmful Practices - Project Brief Harmful Practices - Project Brief
Harmful Practices - Project Brief
 
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...
Ending Violence Against Girls, Boys and Women Via A Gender-Transformative, Li...
 
Teachers for All PROJECT BRIEF (9).pdf
Teachers for All PROJECT BRIEF (9).pdfTeachers for All PROJECT BRIEF (9).pdf
Teachers for All PROJECT BRIEF (9).pdf
 
Teachers for All - Project Brief
Teachers for All - Project BriefTeachers for All - Project Brief
Teachers for All - Project Brief
 
Sport for Development Research Project Brief
Sport for Development Research Project BriefSport for Development Research Project Brief
Sport for Development Research Project Brief
 
What Makes Me? Core capacities for living and learning. Presentation at WISE ...
What Makes Me? Core capacities for living and learning. Presentation at WISE ...What Makes Me? Core capacities for living and learning. Presentation at WISE ...
What Makes Me? Core capacities for living and learning. Presentation at WISE ...
 
Webinar Summary: Intersections Between Violence Against Children and Violence...
Webinar Summary: Intersections Between Violence Against Children and Violence...Webinar Summary: Intersections Between Violence Against Children and Violence...
Webinar Summary: Intersections Between Violence Against Children and Violence...
 
Data Must Speak — Project brief
Data Must Speak — Project briefData Must Speak — Project brief
Data Must Speak — Project brief
 
Intersections between Violence Against Children and Women: Prevention and Res...
Intersections between Violence Against Children and Women: Prevention and Res...Intersections between Violence Against Children and Women: Prevention and Res...
Intersections between Violence Against Children and Women: Prevention and Res...
 
Digital learning — Project brief
Digital learning — Project briefDigital learning — Project brief
Digital learning — Project brief
 
Research uptake and impact — Project brief
Research uptake and impact — Project briefResearch uptake and impact — Project brief
Research uptake and impact — Project brief
 
Violence against children and women — Project brief
Violence against children and women — Project briefViolence against children and women — Project brief
Violence against children and women — Project brief
 
Gender-responsive age-sensitive social protection — Project brief
Gender-responsive age-sensitive social protection — Project briefGender-responsive age-sensitive social protection — Project brief
Gender-responsive age-sensitive social protection — Project brief
 
Child labour — Project brief
Child labour — Project briefChild labour — Project brief
Child labour — Project brief
 
Global kids online — Project brief
Global kids online — Project briefGlobal kids online — Project brief
Global kids online — Project brief
 
Disrupting harm — Project brief
Disrupting harm — Project briefDisrupting harm — Project brief
Disrupting harm — Project brief
 
Time to teach — Project brief
Time to teach — Project briefTime to teach — Project brief
Time to teach — Project brief
 
Let us learn — Research brief
Let us learn — Research briefLet us learn — Research brief
Let us learn — Research brief
 
Children, migration and displacement — Project Brief
Children, migration and displacement — Project BriefChildren, migration and displacement — Project Brief
Children, migration and displacement — Project Brief
 

Strengthening and Promoting Education Data Systems and Utilization in Africa: Lessons from the Data Must Speak Global Initiative

  • 1.
  • 2.
  • 3.
  • 4. MoEAC | Impact Study of the Policy on PMLP 4
  • 5.
  • 6. Data Must Speak (DMS) Global Initiative Introduction UNICEF September 2021 | Africa Evidence Week 2021 © UNICEF/UN0318715/Frank Dejongh
  • 7. Motivation Globally, education systems regularly collect large amounts of data from schools. However, too often these data aren’t actively used to improve learning or education management.
  • 8. Overview Launched in 2014, and co-funded by the Global Partnership for Education (GRA, KIX), Hewlett Foundation and NORAD. DMS aims to strengthen the use of data to: i. Enhance governance and management of education systems ii. Enhance social accountability and demand for high-quality education at local level iii. Improve global knowledge regarding what works, or not, for community participation and the use of data for improved equity and learning. Active in 17 countries, 13 of which are in Africa: • Angola, Burkina Faso, Chad, Cote d’Ivoire*, Ethiopia*, Ghana*, Madagascar, Mali*, Namibia, Niger, Tanzania*, Togo, Zambia (*=research only)
  • 9. Overview • Demand fromthe Ministry of Education / set up national technical team • Baseline analysis • Consultations to identify priorities for support in the light of the needs. • “A-la-carte” activities selected for implementation • Action plan implemented directly by the Ministry of Education Implementation Modality Guiding Principles • Flexibility and national ownership • Sustainability • Synergy • A “learning-by-doing”approach • Peer-to-peer (South-South) Learning • Scalability and replicability
  • 10. Common “A la carte” Activities • Strengthening EMIS and data harmonization • Developing indices and formulas to support government resource allocation and decision-making • Developing profile cards/dashboards to feed user-friendly education data back to regional, district, and school level for decision-making • Simplified school report cards for community engagement and social accountability to improve education
  • 11. Examples: Indices Nepal: The Equity Index captures disparities in education outcomes (access, survival and learning) across different socio-demographic groups (gender, location, dalit/non-dalit, disability, wealth, mother’s education) The Philippines: Teacher Hardship Index using criteria based on a survey of teachers (see pie chart). Teachers from the 15% of public elementary schools and 7% of public secondary schools (those in most difficult context) will benefit from the Special Hardship Allowance No electricity,7% Poverty incidence, 7% No water, 4% No internet, 4% Temporary learning spaces, 2% Human violence, 14% Travel cost to Division, 14% Travel timeto Division, 48%
  • 12. Example: Profile Cards / Dashboards • Prepared for regional, district, other sub-administrative units, school, and community level • Highlight results of key indicators pertaining to: • Learning outcomes • Progression/repetition/dropout • Enrollment and characteristics of learners • Teachers and physical facilities • Learning materials and financial resources • Provide comparisons of performance against: • National standards • National/regional/district averages • Equity considerations • Used to prioritize financial and pedagogical support
  • 13. DMS Knowledge Generation Activities • Development of community engagement guidelines with UNICEF C4D colleagues • Guidelines • Practical implementation guide • Toolbox • Evaluation related to DMS priorities • Knowledge sharing through webinars, publications, and posters
  • 14. What have we learned so far? • Analysis of community engagement in 6 countries found that community participation is associated with: • Reduction of dropouts • Improvement of exam pass rates • Better learning environment (including better Nutrition, WASH and heath in school facilities) • A 2018-2019 formative evaluation of DMS across five countries found: • DMS has improved access to information about education services and outcomes, though there have been some bottlenecks in the transfer of DMS processes and ownership from central to lower levels • Evidence to suggest that the availability of increased information through the school profile cards has • Increased community understanding of school priorities and needs / raised awareness of the generally low levels of learning / led to greater community participation in decision-making in some school districts; • Not yet translated into actual power to hold schools and school districts more accountable for results, or for providing the resources required for the schools to function well • Indices were successfully developed and incorporated into government planning and budget allocation
  • 15. What have we learned so far? Impact evaluation in Zambia to measure the effect of community trainings on the content and use of the community-friendly school profiles (2018-2019) • Positive impacts on intermediate outcomes • Increased understanding of the profile cards among parents/caregivers (75% vs 50%) • Increased knowledge among educators/PTAs about the status of their school and improvement areas • Increase in parents/caregivers’ participation in at least one PTA meeting (8 pp) • Qualitative reports of using profile cards to set priorities, increased motivation among teachers and students, greater willingness by community members to contribute financially • No significant impacts (within one year) on longer-term outcomes • Identified a need to address gaps in community capacity to engage in school improvement planning as well as issues of distrust/inequity within community participation structures
  • 16. Data Must Speak (DMS) Positive Deviance Research Introduction UNICEF Office of Research September 2021 | Africa Evidence Week 2021 © UNICEF/UNI297252/Schermbrucker
  • 17. • Same Guiding Principles (DNA) as for the other DMS components & also focused on Foundational Literacy and Numeracy • Objective: Finding out and understanding positive deviant behaviors/practices in best performing schools and ways to scale them in more schools • Methodologies: Quantitative research, Behavioral science, Implementation research, & Scaling science • Co-funded by Internal UNICEF resources (global and country level), Hewlett Foundation, KIX (IDRC/GPE), NORAD, Schools2030, and Jacobs Foundation • Tapping on UNICEF unique fieldpresence (900 education staff) and theirtrusted partnerships w/ Ministries 13 participating countries in Africa, Asia & Latin America Brazil | Burkina Faso | Cote d’Ivoire | Ethiopia | Ghana | Lao PDR Madagascar | Mali | Nepal | Niger | Tanzania | Togo | Zambia DMS Research Component
  • 18. It is an innovative methodology used to understand what makes certain schools perform better than others even though they operate in the similar context & with the same resources, by analyzing their behaviors and practices. What is Positive Deviance? Argentina – By improving the relationship between communities and schools, students are much more likely to graduate primary school Dura, L. & Singhal, A. (2009) Namibia – Students learning outcomes improved when head-teachers act as role-models and foster a strong team spirit UNICEF (2015) U.S.A – When receiving positive feedback from teachers, parents, and friends, students with learning disabilities are much less likely to drop-out Singhal, A. (2013)
  • 19. Practices & Behaviors School Leadership; Relations between Teachers & School Leaders; Teachers & Teachers Classroom Practices Teachers & Students Relations & Dynamics School & Community Relations & Dynamics School/District Relations & Dynamics Domains of Practices/Behaviors under Study
  • 20. Co-Creation Design & Co- Implementation Approach Ministry of Education (central & decentralized) Teachers & School Leaders Communities, Parents Development Partners & CSOs Local & International Academics Aparticipatoryresearchprojectfromand forministries’ officials,schoolleaders, teachers,communities, and children Co-Creation & Co-Implementation from the Outset
  • 21. Co-Creation Design & Co- Implementation Approach Ministry of Education (central & decentralized) Teachers & School Leaders Communities, Parents Development Partners & CSOs Local & International Academics Co-Creation & Co-Implementation from the Outset Improve research uptake Research is contextualized Linking research to policy - answering national education priorities Ensure buy-in from the outset
  • 22. Stage 1 Analysis of resources and context associated with school performance [Quantitative Research] Stage 2 Identification of Positive Deviant Schools and School Typology [Quantitative Research] Stage 3 Understanding School-level Positive Deviant Behaviors/Practices [Behavioral Science] Stage 4 Investigating Levers for Optimum Scale [Participatory Implementation Research & Scaling Science] Stage 5 Country-level Knowledge Use & Global Mobilization Stage 0 Global Methodological Review Country-Tailored Research Methodology
  • 23. Valuing Country-Level Capacity and Solutions Grassrootsolutions to nationaleducationissues Strengthening in-country technicalcapacity to manage education data and generate evidence Leveragingnationalexisting datasets to analyze the education ecosystem Listening to schools to identify localpositive deviantbehaviors and practices in their context
  • 24. Thank you! Annika Rigole Education Specialist | UNICEF Eastern & Southern Africa Regional Office | arigole@unicef.org Renaud Comba DMS Research Manager | UNICEF OoR | rcomba@unicef.org © UNICEF/UNI232840/Bridger
  • 25.
  • 26. 26 Data Must Speak: Namibia Country Experience 15 September 2021
  • 27. [Country-Level Situation on Education, Research, and Data] Source: EMIS Annual Education Census 2020
  • 28. ❑ Officially joined DMS in July 2018 ❑ Built on strong foundations & work in strengthening EMIS architecture and functionality ❑ DMS sharpened the focus on improving quality, timeliness and use of data for planning, budgeting and decision making in education ❑ Key results in EMIS system strengthening: ❑ This year’s data, this year! Twice a year! ❑ Decentralized data collection, quality assurance to all 14 regions. ❑ Incorporated Washington Group Questions on disability into AEC in 2020 ❑ Incorporated module on EMIS in school board training (social accountability & school governance) ❑ Ring-fenced funding for EMIS and OpenEMIS through Ministry’s own budget
  • 29. ❑ Linked EMIS data to payroll data  identified ghost teachers and saved N$ ~20 million annually ❑ Formulated School Grant Policy including school grant formula ❑ Priorities moving forward: fiscal management and fiscal incidence, post provisioning and spending equity Inspired by Positive Deviant Study (2015), NEAS looked at: 1. Learning outcomes trend analysis 2. Cont. Assessment system analysis 3. Empirical analysis of socio-economic determinants of education ❑ All three components have a DMS dimension ❑ Analytical framework for improved links between EMIS and exam/SAT data ❑ Learner and teacher attendance data for improving outcomes
  • 30. ❑ EMIS lifecycle: a fair balance of process – people – technology ❑ Sensitization is key: needs to be both vertical (including managers) and horizontal (including all programmes in education where data is critical to work) ❑ Bottom-up approach: Sensitization must include parents, teachers, learners and the wider community ❑ Resources and formalisation:Adequate time, efforts and financial resources must be ring-fenced and to ensure sustainability ❑ GRN ownership and leadership
  • 31. ❑ Built ECD-EMIS from scratch using EMIS as a model (interoperable) ❑ ECD-MIS custom built, decentralized and web-based. ❑ National ECD Surveys carried out in 2018 and 2019 (only rapid response survey in 2020) ❑ Captures information about ECD centres, enrolment (GER and NER), edu-carers, nutrition, health & disabilities, learning environment, fees, support. ❑ Currently developing ECD registration and assessment modules Accelerating growth of ECD centres since independence in Namibia
  • 32. ❑ Child protection: producedViolenceAgainst Children (VAC) Study (2019) ❑ Data-2-Action Plan using DMS principles (2020) ❑ Child welfare: carried out a data landscaping analysis (2020) ❑ Formulated DMS Action Plan and integrated key activities in the Ministry’s rolling work plan
  • 33. Awareness of importance data DMS sensitization workshop with Senior Mgmt. Increase investment in CW/CP data Use of data Comprehensive audit of CW datasets (2010 to date) Increase use of CW/CP data Fragmentation of data DMS interoperability workshop (DHIS-2) Improve linkages between CW/CP and GBV data Issue Action Result
  • 34. ❑ Lifecycle approach: linking ECD data to formal education data ❑ Interoperability: ❑ Design ECD MIS and EMIS so they speak to each other ❑ DHIS-2:child welfare/protection and GBVPU data ❑ Awareness of the importance of data is expected to increase use of data and resources to operate admin data in child welfare/protection
  • 35. Components of a mature administrative data landscape piloted in Namibia
  • 36.
  • 37.
  • 38. Initiative Data Must Speak Togo TCHEWAFEI A. Badja, Economiste et Spécialiste en Planification et gestion de l’éducation République Togolaise Ministère des enseignements primaire, secondaire, technique et de l’artisanat Direction de la planification de l’éducation et de l’évaluation
  • 39. Plan de Présentation I Analyse existant, option du Togo et étapes franchies II Principaux résultats obtenus III Perspectives et prochaines étapes IV Leçons tirées de l’expérience
  • 40. Analyse existant, option du Togo et étapes franchies Existence du Tableau de Bord (TdB) école mais : X Juste pour le primaire X Pas automatisé X Très technique et peu adapté pour une bonne compréhension par les acteurs terrain X Parlait juste au niveau central X Ne parlait pas niveau local Pertinence de DMS : ✓ Renvoie l’information compréhensible par le plus grand nombre d’acteurs a tous les différents niveaux du système ✓ Améliore le pilotage du système à tous les niveaux ✓ Contribue à l’amélioration de la qualité des données ✓ Renforce l’information, la responsabilisation et la redevabilité des acteurs
  • 41. 2014 Lancement initiative DMS : • Ancrage institutionnel • Analyse de l’existant • Identification des priorités et choix du pays Analyse existant, option du Togo et étapes franchies 2015-2017 2018-2019 2020-2021 • Stabilisation modèles TdB JE, CEG, lycée, IESG • Automatisation TdB JE, CEG, lycée et IESG avec les données d’examen (CEPD, BEPC, BAC2) • Rédaction guides utilisation TdB JE, CEG, lycée et IESG • Impression et dissémination TdB et guides (tous étab. Scol.) • Formation des acteurs • Stabilisation des modèles de TdB simplifiés (communautaires) • Lancement composante recherche initiative DMS : atelier de cocréation écoles modèles positives • Stabilisation modèles de TdB pour le EP et IEPP • Automatisation des TdB EP et IEPP avec CEPD • Rédaction guides utilisation TdB EP et IEPP • Impression et dissémination TdB et guide • Formation des acteurs/utilisateurs • Autres (révision des textes sur les GOGEP et COGERES)
  • 42. Principaux résultats obtenus – Assistance Technique Fusion des bases de données SIGE et des résultats aux examens (CEPD, BEPC et BAC2) Impression et diffusion nationale régulière des Tableaux de Bord (JE, EP, CEG, LYCEE) dans tous les établissements scolaires du Togo Formations des inspections et des régions intègrent l’utilisation des TdB Conception des modèles de TdB simplifiés
  • 43. Principaux résultats obtenus – Assistance Technique Tableau de Bord école/établissement ✓ Localisation de l’établissement ✓ Contexte de l’établissement ✓ Effectifs des élèves et résultats à l’examen ✓ Moyen de l’établissement ✓ Comparaison des résultats et des moyens de l'école à ceux de l'IEPP, de la DRE et du Pays Tableau de Bord inspection ✓ Données générales ✓ Effectifs d’élèves et résultats à/aux l’examen(s) ✓ Moyens ✓ Comparaison de la situation à celle de la DRE et du pays ✓ Répartition des écoles en fonctions de leurs indices de résultats et de contexte/moyens
  • 44. C. INDICES DE CONTEXTE/MOYENS ET DE RESULTATS Norme 98 2 Pourcentage de non-redoublants 88 2 Indice de parité du taux de rétention 98 2 Taux de rétention au primaire 98 2 98 2 98 2 Eff moins de 40/section Niv Nb % CP1 0 0 98 2 CP2 33 98 2 CE1 30 98 2 CE2 0 98 2 CM1 37 Pourcentage d'élèves ayant une place assise 98 2 CM2 29 Pourcentage de salles de classe en matériaux permanents 98 2 Total 129 61 Pourcentage d'élèves dans des salles de classe de moins de 40 élèves 60,6 61,3 48,6 49 98 2 48 100 100 100 96 94 95 95 100 92 99 97 59 67 99 81 88 0 100 94 79 78 Indice de parité pour le pourcentage de non redoublants Pourcentage d'élèves qui partage leur enseignant avec moins de 40 élèves 56 52 79 79 Pourcentage d'enseignants fonctionnaires (moyenne IEPP: écoles publiques et comm.) 50 100 100 52 57 100 DRE MARITIME 0,90 0,89 IEPP VO_NORD 0,60 0,86 0,4 1,4 1,0 5. Comparaison des résultats et des moyens de l'école à ceux de l'IEPP, de la DRE et du Pays IEPP VO_NORD EPP ATTIVE APEYEME / 20405P016P Pourcentage d'élèves ayant un manuel de lecture (moyenne IEPP: écoles pub et comm.) 34 66 59 52 Pourcentage d'élèves ayant un manuel de calcul (moyenne IEPP: écoles pub et comm) 19 56 55 54 DRE MARITIME TOGO 100 95 98 98 Taux de réussite au CEPD 100 82 85 83 A. Ressources matérielles et humaines EPP ATTIVE APEYEME / 20405P016P IEPP VO_NORD DRE MARITIME TOGO EPP ATTIVE APEYEME / 20405P016P 0,9 0,3 Efficience Contexte / moyens Résultat Indice de parité du taux de réussite au CEPD TOGO 0,64 0,87 1,4 EPP IEPP DRE TOGO 0,0 0,1 0,2 0,3 0,4 0,5 0,6 0,7 0,8 0,9 1,0 Indice global de contexte, moyens EPP IEPP DRE TOGO 0,0 0,1 0,2 0,3 0,4 0,5 0,6 0,7 0,8 0,9 1,0 Indice global de résultat 100 96 59 67 100 100 0 20 40 60 80 100 Indice de parité pour le pourcentage de non redoublants Pourcentage de non-redoublants Indice de parité du taux de rétention Taux de rétention au primaire Indice de parité du taux de réussite au CEPD Taux de réussite au CEPD EPP ATTIVE APEYEME / 20405P016P IEPP VO_NORD Norme Indicateurs de résultat 19 34 50 56 100 0 60,56338028 0 20 40 60 80 100 Pourcentage d'élèves ayant un manuel de calcul (moyenne IEPP: écoles pub et comm) Pourcentage d'élèves ayant un manuel de lecture (moyenne IEPP: écoles pub et comm.) Pourcentage d'enseignants fonctionnaires (moyenne IEPP: écoles publiques et comm.) Pourcentage d'élèves qui partage leur enseignant avec moins de 40 élèves Pourcentage d'élèves ayant une place assise Pourcentage de salles de classe en matériaux permanents Pourcentage d'élèves dans des salles de classe de moins de 40 élèves Indicateurs de moyens EPP IEPP DRE TOGO 0,0 0,2 0,4 0,6 0,8 1,0 1,2 1,4 1,6 Indice global d'efficience =Indice global de résultat/indice global de contexte,moyens - efficient + efficient Exemple TdB école primaire
  • 45. Code: 30307P076P DRE : Inspection : Ecole : Statut : Directeur : Année scolaire: 2019-2020 IM GS5 IM GS5 IM GS3 IMG S3 IMG S3 IMG S3 IMG S3 IMG S3 IM GS5 IM GS4 IM GS5 IM GS4 20 15 18 8 7 84 0 IM GS4 0 IMG S5 PLATEAUX AMOU_SUD Public DA KERSE A TSU I MG S1 I MG S2 I MG S2 1. Contexte de l'école ----------- Secrétariat Général ----------- Direction de la Planification de l'Education et de l'Evaluation 16 I MG S2 I MG S2 IMG S1 FICHE ECOLE PRIMAIRE EPP ADJAHOUN TODJI / 30307P076P 2. Effectifs d'élèves et résultats au CEPD I MG S2 Ministère des Enseignements Primaire, Secondaire, Technique et de l'Artisanat CP 1 CP 2 Exemple TdB simplifié école primaire (communautaire)
  • 46. Liste des quinze écoles les "moins efficientes" Code Nom Indicateurs de résultats le plus faible 1 30813P014P EPP KPELE TUTU CENTRALE Taux de rétention dans le cycle 2 30813P011P EPP AKATA SONAPH Taux de rétention dans le cycle 3 30813P017P EPP KPELE TUTU ZIONOU Taux de rétention dans le cycle 4 30813P037P EPP KPELE GOVIE CENTRALE Taux de rétention dans le cycle 5 30813P029P EPP KPELE AMETO Taux de rétention dans le cycle 6 30813P053P EPP KPELE GODZO Indice de parité de rétention 7 30813P092P EPP KPELE ATIME DODI Indice de parité de réussite au CEPD 8 30813P058P EPP KPELE KPELEDJI Taux de rétention dans le cycle 9 30813P081P EPP KPELE BEME Taux de rétention dans le cycle 10 30813P083P EPP KPELE BEME TOUSSI ALATI Taux de rétention dans le cycle 11 30813P034P EPP KPELE KPONVIE Taux de rétention dans le cycle 12 30813P073P EPP KPELE ADETA ZONGO G/A Indice de parité de réussite au CEPD 13 30813P100C EPC AVEGBADJE Taux de rétention dans le cycle 14 30813P105C EPC SAINTE TRINITE KPELE TSIKO Indice de parité de rétention 15 30813P055P EPP KPELE GOUDEVE G/B Taux de rétention dans le cycle Liste des 5 écoles les "plus efficientes" 1 30813P095P EPP KPELE WOUGBA 2 30813P090P EPP KPELE YAHA 3 30813P067P EPP KPELE ELEME TODZI 4 30813P020P EPP KPELE TUTU TODZE 5 30813P045P EPP KPELE ASSOGBE 42% 25% 15% 49% 27% 27% 56% 30% 28% 20% 41% 29% 25% 0% valeur 30% IEPP: KOZAH_NORD 5. Répartition des écoles en fonctions de leurs indices de résultats et de contexte/moyens KPELE 0,41 0,64 0,87 1,11 0,21 0,43 0,65 0,87 Indice de résultat Indice de contexte/moyens Exemple TdB simplifié école primaire (communautaire)
  • 47. Étape 1 Analyse Quantitative: Identification des ressources et du contexte associés aux performances scolaires Étape 2 Typologie des Ecoles: Identification des écoles « modèles positives » Étape 3 Sciences du Comportement: Identification des comportements/pratiques « modèles positifs » au sein des écoles sélectionnées Étape 5 Utilisation des résultats au niveau national et dissémination à toutes les parties prenantes Étape 0 Analyse documentaire et méthodologique globale Étape 4 Recherche sur la Mise en Œuvre: "Comment" mettre à l'échelle les pratiques/comportements modèles positifs (Science de la mise à l’échelle) Les Étapes de la Recherche au Togo
  • 48. Utilisant les données SIGE et examen de 2015 à 2021 pour toutes les écoles primaires et secondaire publiques et communautaires avec comme indicateur de performance: (1) le taux de promotionen classe supérieur et (2) les réussiteaux examens. Etape 1 – Analyse Quantitative 1 Au primaire, le taux de promotion des filles est 1.9 points de pourcentage (pp) inférieur a celui des garçons. 2 Quand l’enseignant est une femme le taux de promotion des filles est 1.4 pp supérieur a celui des garçons 3 L’existence de latrine dans l’école permet de réduire la différence de taux de promotion entre filles et garçons de 0.4 pp. 4 Quand la taille de la classe est plus grande, le taux de promotion est plus faible. 5 Quand l’enseignant est aussi directeur, le taux de promotion est plus faible (-0.6 pp).
  • 49. Etape 1 – Analyse Quantitative 6 Les classes multi-niveaux ont un taux de promotion plus faible (- 0.7 pp). 7 Plus de réunions avec l’APE est associé a un meilleur taux de promotion (+1 pp pour une réunion/mois comparé a 0). 8 Les enfants de fonctionnaire ont des taux de promotion beaucoup plus élevés que les autres (+3.4 pp) => rôle important du milieu familial. 9 Les classes avec un manuel par élèves et une place assise par élève ont un taux de promotion 1.3 pp plus élevée que la moyenne.
  • 50. Perspectives et prochaines étapes Initiative DMS ✓ Automatisation des Tableaux de Bord simplifiés (destiné aux communautés) ✓ Test d’utilisation des Tableaux de Bord simplifiés ✓ Impression et dissémination des Tableaux de Bord simplifiés ✓ Formations à l’utilisation des Tableaux de Bord simplifiés DMS Recherche ✓ Conception d'indices scolaires et calcul/automatisation des indices ✓ Identification des écoles modèles positives ✓ Identification des comportements et pratiques modèles positifs (y compris sur l'engagement communautaire)
  • 51. Leçons tirées de l’expérience Leçonsd’ordretechnique: ✓ Consolidationdelacollaborationentrelesdifférentsservicesproducteursetutilisateursdedonnées. ✓ Améliorationduprocessusdecollecteetlecontrôledelafiabilitédesdonnées(SIGE)ainsiquel’importancedelier lesbasesdedonnéesentres elles. ✓ LesdonnéesderésultatsTDBsontutiliséespourlediagnosticdelaqualitédansduprogrammed’appuiaupilotage delaqualitédel’éducation,facilitantlasynergiedesinterventionsdanslesecteur. Leçonsd’ordreinstitutionnel: ✓ Coordinationentrelesdifférentesstructuresimpliquéesdanslaproductionetl’utilisationdesTableauxdeBord ✓ Importanceduprocessusdeco-créationdelarechercheavec touteslespartiesprenantesdesledébutduprojet. ✓ Disponibilitédesressourceshumaines…(tempsconsacré..) ✓ Miseenplacepararrêté ministérield’uneéquipetechniquepourharmonisationdesbasesdedonnéesdusecteur + s’appuyersurlesstructuresdéjàexistantespourlarecherche Leçonsd’ordrestratégique: ✓ Appropriationdel’utilisationdesTdBécolesdansl’élaborationdesPlansdedéveloppementd’Ecole
  • 52. Merci de votre attention République Togolaise Ministère des enseignements primaire, secondaire, technique et de l’artisanat Direction de la planification de l’éducation et de l’évaluation
  • 53.
  • 54.
  • 55. MoEAC | Impact Study of the Policy on PMLP 55