Résultats du PISA 2022 (Volume II)

Qu’est-ce que l’enquête PISA ?

Programme international pour le suivi des acquis des élèves (PISA) de l’OCDE

« Qu’importe-t-il de savoir et de savoir faire en tant que citoyen ? » C’est pour répondre à cette question et au besoin de données comparables à l’échelle internationale sur la performance des élèves que l’Organisation de coopération et de développement économiques (OCDE) a mis sur pied le Programme international pour le suivi des acquis des élèves (PISA) en 1997 et a mené la première évaluation en 2000.

L’enquête PISA évalue tous les trois ans dans quelle mesure les élèves de 15 ans possèdent les connaissances et compétences essentielles pour participer pleinement à la vie sociale et économique. L’enquête PISA ne cherche pas simplement à déterminer si les élèves qui arrivent au terme de la scolarité obligatoire sont capables de restituer ce qu’ils ont appris, mais vise aussi à déterminer dans quelle mesure ils sont capables de faire des extrapolations à partir de ce qu’ils ont appris et d’utiliser leurs connaissances dans des situations qui ne leur sont pas familières, qu’elles soient ou non en rapport avec l’école.

Alors que la huitième évaluation devait se tenir en 2021, le Comité directeur du PISA l’a repoussée à 2022 en raison des difficultés auxquelles les systèmes d’éducation ont dû faire face pendant la Pandémie de COVID-19.

Ce qui rend l’enquête PISA unique

L’enquête PISA est unique en son genre, comme le montrent ses grands principes :

• son bien-fondé pour l’action publique : les données sur les acquis des élèves sont rapportées à des données sur leurs caractéristiques personnelles et sur des aspects clés qui façonnent leur apprentissage à l’école et ailleurs. Grâce à cette approche, l’enquête PISA peut repérer des différences dans les profils de performance et identifier les caractéristiques des élèves, des établissements et des systèmes d’éducation qui se distinguent par des niveaux élevés de performance ;

• son approche novatrice basée sur la notion de compétence des élèves, qui renvoie à la capacité des élèves d’exploiter des savoirs et savoir-faire dans des domaines clés et d’analyser, de raisonner et de communiquer lorsqu’ils énoncent, résolvent et interprètent des problèmes qui s’inscrivent dans divers contextes ;

• sa pertinence pour l’apprentissage tout au long de la vie : l’enquête PISA ne se limite pas à évaluer les compétences des élèves dans des matières scolaires, mais demande également à ceux-ci de décrire leur envie d’apprendre, leur perception d’eux-mêmes et leurs stratégies d’apprentissage ;

• sa périodicité, qui permet aux pays de suivre leurs progrès sur la voie de l’accomplissement d’objectifs clés d’apprentissage ;

• sa grande couverture géographique : les 37 pays membres de l’OCDE ainsi que 44 pays et économies partenaires ont participé à l’enquête PISA en 2022.

Quels pays et économies participent à l’enquête PISA ?

L’enquête PISA sert d’instrument d’évaluation dans de nombreuses régions du monde. Les épreuves PISA ont été administrées dans 43 pays et économies lors de la première évaluation (32 en 2000 et 11 en 2002), dans 41 pays et économies lors de la deuxième évaluation (en 2003), dans 57 pays et économies lors de la troisième évaluation (en 2006), dans 75 pays et économies lors de la quatrième évaluation (65 en 2009 et 10 en 2010), dans 65 pays et économies lors de la cinquième évaluation (en 2012), dans 72 pays et économies lors de la sixième évaluation (2015) et dans 79 pays et économies lors de la septième évaluation (en 2018). En 2022, 81 pays et économies ont participé aux épreuves PISA.

Graphique II.1. Carte des pays et économies PISA

Les pays qui ont participé pour la première fois au PISA sont : l’Autorité palestinienne, le Cambodge, El Salvador, le Guatemala, la Jamaïque, la Mongolie, le Paraguay et l’Ouzbékistan, cependant le Cambodge, le Guatemala et le Paraguay ont participé au Projet PISA pour le développement. Les provinces et municipalités chinoises (Beijing, Shanghai, Jiangsu et Zhejiang) et le Liban ont participé au PISA 2022, mais n’ont pas pu recueillir des données en raison de la fermeture des établissements durant la période prévue de collecte de données.

Caractéristiques majeures de l’évaluation PISA en 2022

Le contenu

Les mathématiques sont le domaine principal d’évaluation de l’enquête PISA en 2022, dont les domaines mineurs sont la compréhension de l'écrit, les sciences et la pensée créative. À chaque enquête PISA, un domaine est évalué en profondeur. Les épreuves portant sur ce domaine absorbent près de la moitié du temps total des épreuves, tous domaines confondus. Les mathématiques étaient le domaine principal, tout comme en 2012 et en 2003. La compréhension de l’écrit était le domaine principal en 2000, 2009 et 2018, tandis que c’était le cas pour les sciences en 2006 et en 2015.

Cette alternance permet d’analyser en profondeur chacun des trois domaines majeurs d’évaluation tous les neuf (ou dix) ans et de rendre compte de leur évolution globale tous les trois (ou quatre) ans. Comme cette enquête a été repoussée de 2021 à 2022 en raison de la pandémie de COVID-19, les résultats sont publiés avec un an de retard par rapport aux enquêtes précédentes.

La pensée créative a été évaluée à titre de domaine d'évaluation innovant pour la première fois dans PISA 2022.

Le Cadre d’évaluation et d’analyse de l’enquête PISA 2022 (OCDE, 2023[1]) définit et décrit de manière plus détaillée les domaines évalués dans l’enquête PISA 2022 :

• Les mathématiques y sont définies comme l’aptitude d’un individu à se livrer à un raisonnement mathématique et à formuler, employer et interpréter les mathématiques pour résoudre des problèmes dans un éventail de contextes de la vie réelle. Il faut notamment utiliser des concepts, procédures, faits et outils mathématiques pour décrire, expliquer et prévoir des phénomènes. Les mathématiques permettent aux élèves de porter des jugements fondés et de prendre des décisions avisées, et de devenir des citoyens constructifs, engagés et réfléchis au XXI^e siècle.

• La compréhension de l’écrit se définit comme la capacité des individus de comprendre l’écrit, d’utiliser et d’évaluer des textes, mais aussi d’y réfléchir et de s’y engager afin que chacun puisse réaliser ses objectifs, développer ses connaissances et son potentiel, et participer à la vie en société.

• La culture scientifique est la capacité des individus à s’engager dans des questions et des idées en rapport avec la science en tant que citoyens réfléchis. Les individus cultivés sur le plan scientifique sont prêts à s’engager dans des raisonnements sensés à propos de la science et de la technologie, et doivent pour ce faire utiliser les compétences suivantes : expliquer des phénomènes de manière scientifique, évaluer et concevoir des investigations scientifiques, et interpréter des données et des faits de manière scientifique.

• La pensée créative est la capacité des élèves à s’engager de manière productive dans la génération, l’évaluation et l’amélioration d’idées qui peuvent déboucher sur des solutions originales et efficaces, des avancées dans le domaine des connaissances et des expressions percutantes de l’imagination.

Lors de l’évaluation PISA de 2022, les pays et économies pouvaient également, à titre facultatif, évaluer la culture financière des élèves.

Les élèves

Environ 690 000 élèves ont passé les épreuves PISA en 2022, représentatifs des quelque 29 millions d'élèves âgés de 15 ans scolarisés dans les établissements scolaires de 81 pays et économies.

Les élèves PISA sont ceux qui avaient entre 15 ans et 3 mois révolus et 16 ans et 2 mois révolus au moment de l’évaluation et avaient accompli au moins 6 années de scolarité obligatoire. L’application de ce critère d’âge dans tous les pays et lors de toutes les évaluations permet de suivre d’une manière cohérente les connaissances et compétences des élèves nés la même année qui sont encore scolarisés à l’âge de 15 ans, en dépit de la diversité de leur historique d’apprentissage à l’intérieur et à l’extérieur du cadre scolaire. Ils peuvent être scolarisés dans un établissement public, privé ou étranger, à temps plein ou à temps partiel, et dans une filière générale ou professionnelle d’enseignement.

Les normes techniques de l’enquête PISA s’appliquent pour définir la population cible de l’enquête PISA ainsi que le profil des élèves à exclure (voir l’annexe A2). Le taux global d’exclusion de la population cible doit rester inférieur à 5 % dans un pays pour que le score national moyen ne puisse, selon toute vraisemblance, être biaisé de plus de 5 points PISA à la hausse ou à la baisse, soit une variation de l’ordre de 2 erreurs-types d’échantillonnage. Il est possible d’exclure de la population cible soit des établissements, soit des élèves au sein des établissements. Les normes PISA prévoient divers motifs d’exclusion d’élèves ou d’établissements. Des établissements peuvent être exclus parce qu’ils sont très petits, qu’ils sont situés dans des régions reculées et donc difficilement accessibles, ou qu’ils ne se prêtent pas à l’administration des épreuves pour des raisons organisationnelles ou opérationnelles. Quant aux élèves, ils peuvent être exclus s’ils ont une déficience mentale ou qu’ils ne maîtrisent pas suffisamment la langue de l’évaluation.

Les épreuves

Comme en 2015 et 2018, des épreuves informatisées d’une durée totale de deux heures ont été administrées dans la plupart des pays et économies participant à l'évaluation PISA 2022. En mathématiques et en compréhension de l'écrit, une approche adaptative multiniveau a été adoptée pour les épreuves informatisées, les élèves se voyant attribuer un bloc d’items en fonction de leur score aux items précédents.

Les épreuves comportaient des questions à choix multiple ainsi que des items qui demandaient aux élèves de formuler leurs propres réponses. Les questions étaient regroupées dans des unités qui décrivent une situation s’inspirant de la vie réelle. Au total, des items de compréhension de l’écrit, de mathématiques, de sciences et de pensée créative représentant plus de 15 heures de tests ont été administrés, les élèves répondant à des épreuves constituées de différentes combinaisons d’items.

Le test était constitué de six types différents d’épreuves représentant diverses combinaisons de deux des quatre domaines (c’est-à-dire trois domaines majeurs et le domaine d'évaluation innovant). En règle générale, dans chaque pays et économie, 94 % des élèves ont passé des épreuves de 60 minutes dans le domaine majeur des mathématiques et de 60 autres minutes dans l’un des trois domaines mineurs ou d’innovation (compréhension de l'écrit, sciences ou pensée créative). En outre, 6 % des élèves ont passé des épreuves concernant deux domaines mineurs. Un nombre suffisant d’élèves a répondu à chaque épreuve pour permettre l’estimation des compétences et l’analyse psychométrique de tous les items en fonction des élèves de chaque pays et économie et des sous-groupes pertinents au sein d’un pays ou d’une économie, tels que les garçons et les filles ou les élèves issus de milieux sociaux et économiques différents.

De plus, PISA 2022 a conservé une version sur papier de l’évaluation qui ne comprenait que les items d'ancrage ayant été utilisés dans les évaluations sur papier précédentes, version qui a été administrée dans quatre pays : le Cambodge, le Guatemala, le Paraguay et le Viet Nam.

L’évaluation de la culture financière a été de nouveau proposée dans PISA 2022 en option informatisée. Elle repose sur un cadre révisé, lui-même basé sur le cadre mis à jour de PISA 2022. Les instruments cognitifs figurant dans les items d’ancrage et une série de nouveaux tests interactifs ont été développés spécifiquement pour PISA 2022.

Les questionnaires

Les élèves ont également passé 35 minutes à répondre à un questionnaire contextuel. Le questionnaire les interrogeait sur leurs attitudes, leur disposition et leurs croyances, leur milieu familial, leur établissement d’enseignement et leurs expériences concernant leur apprentissage. Les chefs d’établissement ont, quant à eux, rempli un questionnaire à propos de la gestion et de l’organisation du système scolaire et de l’environnement d’apprentissage. Les élèves, tout comme les chefs d’établissement, ont répondu aux items de la section sur les crises mondiales dans leurs questionnaires respectifs. Ces questions visaient à recueillir leur point de vue sur l’organisation de l’apprentissage lors de la fermeture de leur établissement scolaire en raison de la pandémie de COVID-19.

Certains pays et économies ont également choisi d’administrer des questionnaires supplémentaires pour recueillir davantage d’informations. Il s’agissait d’un questionnaire à l’intention des enseignants les interrogeant sur eux et leurs pratiques pédagogiques ; d’un questionnaire à l’intention des parents afin qu’ils fournissent des informations sur la façon dont ils perçoivent l’établissement de leur enfant et s’y impliquent, et la façon dont ils soutiennent leur enfant dans son apprentissage.

Les pays et économies pouvaient également choisir d’administrer aux élèves deux autres questionnaires facultatifs : un concernant la connaissance des élèves en informatique et un autre sur le bien-être des élèves. Un questionnaire sur la culture financière a également été distribué dans les pays et économies qui ont opté pour l’administration d’une évaluation sur la question.

Où trouver les résultats ?

Les premiers résultats de l’enquête PISA 2022 sont publiés dans cinq volumes :

• Le volume I : Apprentissage et équité dans l’éducation (OCDE, 2023[2]) porte sur deux des principaux enjeux en éducation : la performance et l’équité. Le volume étudie la performance des élèves en mathématiques, en compréhension de l’écrit et en sciences dans les pays et économies et l’évolution de la performance au fil du temps. Il s’intéresse, en outre, à l'équité dans l'éducation du point de vue de l’inclusion et de l’égalité, en fonction du sexe des élèves, de leur milieu socio-économique et de leur statut au regard de l’immigration.

• Le volume II : Apprentissage en période de crise et résilience (OCDE, 2023[3]) analyse diverses caractéristiques au niveau des élèves des établissements et des systèmes d’éducation, et examine comment elles sont liées aux résultats des élèves, en termes de performance, d’équité et de bien-être des élèves. Le volume présente également des données sur l’organisation de l’apprentissage lors de la fermeture des établissements pendant la pandémie de COVID-19. Ces résultats peuvent aider les pays à renforcer la résilience de leurs systèmes d’éducation, de leurs établissements et de leurs élèves afin qu’ils soient mieux à même de résister aux perturbations dans l’enseignement et l’apprentissage.

• Le volume III (OCDE, 2024[4]) porte sur la pensée créative. Ce volume s’intéresse à la capacité des élèves à exprimer des idées variées et originales dans les 66 pays et économies qui ont administré l’évaluation dans le domaine innovant de PISA 2022. Il étudie dans quelle mesure la performance et les attitudes associées à la pensée créative varient au sein des pays et entre eux et en fonction des caractéristiques des élèves et des établissements. L’ouvrage donne également un aperçu de la participation des élèves dans des activités créatives, en examinant dans quelle mesure les possibilités de s’impliquer dans la pensée créative diffèrent selon les établissements et les facteurs socio-démographiques, et dans quelle mesure elles sont liées à différents résultats des élèves, notamment en ce qui concerne le bien-être.

• Le volume IV (OCDE, 2024[5]) se penche sur la culture financière. Ce volume étudie dans quelle mesure les élèves de 15 ans s'y connaissent en matière financière dans les 23 pays et économies qui ont administré cette épreuve facultative. Il montre en quoi la culture financière des élèves de 15 ans dépend de leur performance dans d’autres matières et comment elle évolue en fonction des facteurs socio-démographiques. Il présente également un aperçu des expériences des élèves par rapport à l’argent, de leur attitude à l’égard des finances et de leur exposition à la culture financière dans les établissements scolaires.

• Le volume V (OCDE, 2024[6]) aborde la préparation des élèves à l’apprentissage tout au long de la vie. Il présente les aspects clés de la préparation des élèves en vue de poursuivre leur apprentissage tout au long de la vie. Il examine l’attitude des élèves à l’égard des mathématiques, leurs aptitudes sociales et émotionnelles ainsi que leurs aspirations en matière d’éducation future et de carrière.

Références

[5] OCDE (2024), PISA 2022 Results (Volume IV) : How Financially Smart Are Students?, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/5a849c2a-en.

[4] OCDE (2024), Résultats du PISA 2022 (Volume III – version abrégée) : La pensée créative en milieu scolaire, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/b04a0009-fr.

[6] OCDE (2024), Résultats du PISA 2022 (Volume V – version abrégée) : Stratégies et attitudes des élèves vis-à-vis des apprentissages : Des atouts pour la vie, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/29f9ad1c-fr.

[1] OCDE (2023), PISA 2022 Assessment and Analytical Framework, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/dfe0bf9c-en.

[2] OCDE (2023), Résultats du PISA 2022 (Volume I) : Apprentissage et équité dans l’éducation, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/165f1d07-fr.

[3] OCDE (2023), Résultats du PISA 2022 (Volume II) : Apprentissage en période de crise et résilience, PISA, Éditions OCDE, Paris, https://doi.org/10.1787/1dd8c965-fr.