Michaela Martin Acting team leader, Research & Development Team, IIEP-UNESCO Chef d'équipe par intérim, équipe de recherche et développement ...

La page est créée Mathilde Morel
 
CONTINUER À LIRE
Michaela Martin Acting team leader, Research & Development Team, IIEP-UNESCO Chef d'équipe par intérim, équipe de recherche et développement ...
Welcome remarks / Discours d’ouverture

              Michaela Martin
              Acting team leader, Research & Development Team,
              IIEP-UNESCO
              Chef d'équipe par intérim, équipe de recherche et
              développement, IIPE-UNESCO
Michaela Martin Acting team leader, Research & Development Team, IIEP-UNESCO Chef d'équipe par intérim, équipe de recherche et développement ...
Webinar series / Série de webinaires
       Session 1
   1   Use of learning data in the education planning cycle: modalities and obstacles
       L’utilisation des données d’évaluation des apprentissages dans le cycle de
       planification: modalités et obstacles

       Session 2
   2   Policies and institutional settings for the use of learning assessment data
       Politiques des évaluations et cadres institutionnels pour l’utilisation des données
       des apprentissages

   3   Session 3
       Exploring actors’ interactions and the use of learning data
       Etude des interactions entre les acteurs et l’utilisation des données des
       apprentissages
Michaela Martin Acting team leader, Research & Development Team, IIEP-UNESCO Chef d'équipe par intérim, équipe de recherche et développement ...
Use of learning assessment data in the education planning cycle: modalities and obstacles
Session           L’utilisation des données d’évaluation des apprentissages dans le cycle de planification de
   1              l’éducation : modalités et obstacles

             Recap - Récapitulatif
                                          Analyse sectorielle   1.   Use of learning assessment data in each phase of the
                        Education
                                          de l’éducation             planning cycle
                      Sector Analysis
                                                                     L’utilisation des données d’évaluation des
                                                                     apprentissages dans chaque phase du cycle de
                                                                     planification

                                       Education Sector
                                                                2.   Dynamics among the factors influencing the observed
   Monitoring &
    Evaluation                              Plan                     use of assessment data
                                                                     Dynamiques entre les facteurs influençant l’utilisation
                                   Plan sectoriel
Suivi et                           de l’éducation                    observée des données des apprentissages
évaluation
                                                                     • Quality of assessment reports / La qualité des rapports
                                                                       d’évaluation
                       Implementation                                • Dissemination of assessment results / La diffusion des
                                                                       résultats d’évaluation
                       Mise en œuvre                                 • Capacity development / Le développement des capacités
3        Dynamics among factors influencing the use of assessment data
           Dynamiques entre les facteurs influençant l’utilisation des données des
           apprentissages

          Capacity development / Développement des capacités

                             Technical skills are weaker at the                 Capacity building through participation in cross-
                             decentralised level                                national assessments
                             Les compétences techniques sont plus               Formation à travers la participation aux évaluations
                             faibles au niveau décentralisé                     transnationales

   High turnover rates in                         Capacities to produce and use learning
   assessment teams / Des taux                    assessment data remain low
   de rotation du personnel élevés                Les compétences pour produire et utiliser les
   dans les équipes d’évaluation                  données des apprentissages restent faibles

You know the 20-80 rule,
where the 20% of                                               Limited pool of statistically proficient staff / Un bassin limité de
employees do the 80% of      Vous connaissez la règle des      personnel compétent en statistiques:
the work. Those 20%          20-80, où 20% du personnel
                             font 80% du travail. Ces 20%       Outsourcing / Externalisation
should better share their
expertise.                   devraient mieux partager           Important workload for a few people / Une charge de travail
                             leur expertise.                      importante pesant sur quelques personnes
23 March 2021
                                        23 Mars 2021

INSTITUTIONALIZATION OF
ASSESSMENTS

INSTITUTIONNALISATION
DES EVALUATIONS DES
APPRENTISSAGES
Lessons for the use of assessment data
Leçons pour l’utilisation des données
des évaluations des apprentissages

                                                        Ieva Raudonytė & Tuamanaia Foimapafisi
1
                     A patchwork of learning assessments
                     Une mosaïque d’évaluations des

Outline of the
                     apprentissages

presentation     2
                     Assessment policies

Programme            Politiques d’évaluation

de la
                 3
présentation         Institutional settings for assessment
                     teams
                     Modalités institutionnelles pour les
                     services d’évaluation
1

A patchwork of
learning
assessments

Une mosaïque
d’évaluations des
apprentissages
1
       A patchwork of learning assessments
       Une mosaïque d’évaluations des apprentissages

Lack of articulation between
        assessments
                                              Consequences
Manque d’articulation entre                                                       Assessments in Senegal: an example
                                                                                  Evaluations au Sénégal : un exemple
      évaluations
                                     Scattering of scarce financial and human           1      • ESH
                                                     resources
    Overlapping goals and grades
                                       Dispersement de faibles ressources               2      • PAQEEB
Chevauchement des objectifs et des          humaines et financières
        classes évaluées                                                                3      • SNERS

                                      Assessment data analyzed in isolation             4      • Jàngandoo
                                      Données des évaluations analysées de
                                                 façon isolée                           5      • EGRA

         Grades uncovered            Blurred differentiation of the purposes of         6      • PASEC
    Niveaux scolaires non évalués                 each assessment
                                      Différenciation floue entre les objectifs         7      • PISA-D
                                               de chaque évaluation
1
     Alignment with SDG                               SDG 4       By 2030, ensure that all girls and boys complete free, equitable and quality
     Indicator 4.1.1                                  ODD 4       primary and secondary education leading to relevant and effective learning
                                                                  outcomes.
     Alignement avec                                              D’ici 2030, s’assurer que toutes les filles et garçons ont bien terminé un

     l’indicateur 4.1.1 des
                                                                  enseignement primaire et secondaire équitable gratuit et de qualité
                                                                  conduisant à des résultats d’apprentissage pertinents et efficaces.

     ODD
Indicator 4.1.1 education levels
  Niveaux d’enseignement de          Ghana       Guinea        The Gambia         Namibia              Senegal               Zambia
       l’indicateur 4.1.1
                                                  EGRA                                               EGRA/EGMA
           Grades 2/3
                                   EGRA/EGMA    Evaluation        NAT                                   SNERS             EGRA/EGMA
        2e et 3e années                        Nationale des
                                                  Acquis                                                PASEC

    End of primary education
                                                  PASEC                           SEACMEQ                PASEC              SEACMEQ
      Fin du cycle primaire

     End of lower secondary
            education                                                                                                         PISA-D
                                                                  NAT                                   PISA-D
     Fin du premier cycle du                                                                                                   NAS
           secondaire
2

    Assessment policies

    Politiques d’évaluation
2
       Learning assessment systems and institutional framework
       Systèmes d’évaluation des apprentissages et cadre
       institutionnel

                          No assessment policy        Poorly articulated assessments
                          Pas de politique            Evaluations mal articulées
                          d’évaluation

                                                      Assessments developed gradually but
    Difficult to establish an assessment policy       not strategically
     Difficile d’établir une politique d’évaluation   Evaluations développées
                                                      progressivement mais pas
                                                      stratégiquement
2
    Assessment policy: where are we?
    Politique d’évaluation : où en sommes-nous ?
         Countries / Pays   Status of the assessment policy / Statut de la politique d’évaluation

         The Gambia         An Assessment Policy (2015) in place but dissemination missing
                            Une politique d’évaluation (2015) en place mais pas diffusée

         Ghana              Development foreseen
                            Développement prévu

         Guinea             Development foreseen
                            Développement prévu

         Namibia            No policy
                            Pas de politique

         Senegal            Development foreseen
                            Développement prévu

                            National Learning Assessment Framework (NLAF) 2017
         Zambia
                            Cadre National d’Evaluation des Apprentissages (NLAF) 2017
2
    The National Learning Assessment Framework (NLAF) of Zambia
    Le Cadre National d’Evaluation des Apprentissages (NLAF) de la Zambie

    Content of the NLAF / Contenu du NLAF

     Definition of key concepts / Définition des concepts-clés
     Intended use of assessment data / Utilisation attendue des données
     Articulation between assessments / Articulation entre évaluations
     Responsibilities of actors / Responsabilités des acteurs
     Conditions for an effective use of assessment data / Conditions pour une utilisation efficace des
      données des évaluations
    Status / Statut

    Policy in place but not fully implemented / Politique en place mais pas totalement mise en œuvre
2
    Assessment policy: which preconditions?
    Politique d’évaluation : quelles conditions préalables ?

                                         Inclusive processes of policy development
                                  Processus inclusifs dans le développement de la politique

                                                   Dissemination / Dissémination

                        Alignement with other key policies: curriculum, teacher framework, ESP, EMIS
             Alignement avec d’autres politiques-clés: programme scolaire, formation des enseignants, PSE, SIGE

               Zambia            Zambia Education Curriculum Framework (ZECF)
                                 Cadre d’Enseignement du Programme Scolaire de la Zambie
                                 Teacher Curriculum Implementation Guide (TCIG)
                                 Guide de Mise en Oeuvre du Programme Scolaire pour les Enseignants
               The Gambia        Education Sector Policy (2016-2030) / Politique du Secteur Educatif (2016-2030)
                                 Education Strategic Sector Plan (2016-2030) / Plan Sectoriel Stratégique de l’Education
                                 (2016-2030)
2
           Assessment policy: which preconditions?
           Politique d’évaluation : quelles conditions préalables ?
    Integration of learning assessment data in EMIS
    Intégration des données d’évaluation des apprentissages dans les SIGE

      EMIS contains assessment data                 EMIS does not contain assessment data
      Le SIGE contient les données des              Le SIGE ne contient pas les données des évaluations
      évaluations

The Gambia                               Namibia, Guinea               Senegal                     Ghana, Zambia
 EMIS has been collecting national      EMIS are in place but they    Multiple administrative and Assessment data are
  assessment data since 2011             do not contain assessment     pedagogical applications    scattered among different
 Problems with strategic storage of     data                          are in place but do not     education stakeholders
  data have been identified                                            contain assessment data
                                         SIGE sont en place mais                                   Les données d’évaluation
 Le SIGE collecte les données de        elles ne contiennent pas de   De multiples applications   sont dispersées entre
  l’évaluation nationale depuis 2011     données d’évaluation          pédagogiques et             différentes parties
 Les problèmes de stockage                                            administratives sont en     prenantes de l’éducation
  stratégique des données ont été                                      place mais ne contiennent
  identifiés                                                           pas les données
                                                                       d’évaluation
3

    Institutional settings for
    assessment teams

    Modalités institutionnelles
    pour les services d’évaluation
3
                                                                 Institutional settings for assessment teams
                                                                 Modalités institutionnelles pour les services d’évaluation
                                                                 Closeness to the ministry of education
                                                                 Proximité avec le ministère de l’éducation

                                                                       Setting                      Benefits / Bénéfices                                  Risks / Risques
Closeness to the ministry / Proximité avec le ministère

                                                              Unit within the ministry or           Facilitates coordination between assessments,         Vulnerability to political interference
                                                               department of education              curriculum and pedagogy                               Vulnérabilité aux interférences politiques
                                                                Service du ministère ou             Facilite la coordination entre évaluations,
                                                              département de l’éducation            programme scolaire et pédagogie
                                                               Semi-autonomous public               More independence from political and collegial        Misalignement with other educational policies
                                                                       institution                  influence                                             Désalignement avec d’autres politiques éducatives
                                                              Institution publique semi-            Plus d’indépendance par rapport à l’influence
                                                                       autonome                     politique ou collégiale
                                                                                                    Capitalizes on existing institutional capacity and    Overwhelming an institution that already has a
                                                                  Examination board                 expertise                                             clear mandate
                                                                 Comité des examens                 Capitalise sur la capacité institutionnelle et        Risque de submerger une institution qui a déjà un
                                                                                                    l'expertise existantes                                mandat clair
                                                                                                    Palliates lack of technical expertise in assessment   Limiting national ownership and leadership of the
                                                          University, NGO or equivalent             teams                                                 assessment system and interrupting a national
                                                          Université, ONG ou équivalent             Pallie le manque d’expertise technique dans les       cycle of the data management
                                                                                                    services d’évaluation                                 Limite l'appropriation et le leadership nationaux du
                                                                                                                                                          système d'évaluation et interrompt le cycle
                                                 Source: adapted from (UNESCO and UIS, 2018) and enriched by authors based on study results               national de gestion des données
Poll question
Sondage

In your opinion, which entity is best
positioned to manage learning
assessments?

Selon vous, quelle entité est la mieux
placée pour gérer les évaluations des
apprentissages ?
3
        Institutional settings for assessment teams
        Modalités institutionnelles pour les services d’évaluation
        Level of concentration of assessment-related activities and cooperation
        Niveau de concentration des activités relatives aux évaluations et coopération

    1                                          2                                          3

    All tasks linked to assessments are       Tasks linked to assessments are dispersed   Tasks linked to assessments are dispersed
    concentrated in one institution           and communication is poor                   but communication is good
    Les tâches liées aux évaluations sont     Les tâches liées aux évaluations sont       Les tâches liées aux évaluations sont
    concentrées dans une institution          dispersées et la communication est faible   dispersées mais la communication est bonne
3
                                                                                2 dimensions:
    Institutional settings for assessment units                                 1. Closeness to the ministry of education /
    Modalités institutionnelles pour les                                            Proximité avec le ministère de l’éducation
                                                                                2. Level of concentration of assessment
    services d’évaluation                                                           activities / Niveau de concentration des
                                                                                    activités liées aux évaluations

                          Source: compiled by authors based on study findings
3
          Institutional settings for assessment units: what lessons did we learn?
          Modalités institutionnelles pour les services d’évaluation : quelles leçons
          avons-nous apprises ?

Assessments institutionally close to other units,          Being placed under the same umbrella
especially curriculum and planning                         organization or a ministry of education is
Des évaluations institutionnellement proches des           not a guarantee for collaboration
autres services, en particulier ceux en charge des
                                                           Le fait d’être dans la même organisation-
programmes scolaires et de la planification
                                                           cadre ou un ministère de l’éducation n’est
Increased use of assessment data for those                 pas une garantie de collaboration
purposes
Utilisation accrue des données des apprentissages
dans ces domaines
Technical expertise on assessments dispersed
when assessment teams do not collaborate
effectively                                                Trust in assessment teams’ capacities and
                                                           impartiality are key
L’expertise technique sur les évaluations est
dispersée quand les différents services ne                 La confiance dans les compétences et
collaborent pas efficacement                               l'impartialité des services d'évaluation est
                                                           essentielle
Ieva Raudonyte &
                Lynne Sergeant
               IIEP-UNESCO Paris

              7-9 rue Eugène Delacroix, 75116 Paris,
Contact       France

information   +33 1 45 03 77 00

              l.sergeant@iiep.unesco.org
              i.raudonyte@iiep.unesco.org

              www. iiep.unesco.org
              https://learningportal.iiep.unesco.org/en

              @IIEP_UNESCO
Vous pouvez aussi lire