PISA et TIMSS, enquêtes scolaires : que mesurent-elles ?

Intervenant 10:00

Bienvenue à toutes et à tous dans le podcast du magazine Tangente pour une nouvelle exploration de ces sujets qui font vibrer et parfois même trembler le monde des mathématiques.

Intervenant 20:09

Bonjour à tous, je suis vraiment ravie d'être là pour décortiquer tout ça.

Intervenant 10:13

Et pour commencer cette plongée aujourd'hui, il suffit d'imaginer la situation suivante. On donne un problème d'arithmétique élémentaire à des enfants d'une dizaine d'années.

Intervenant 20:22

Ouais, un problème vraiment basique.

Intervenant 10:24

Voilà, une simple addition répétée, le chiffre 7 qu'on ajoute encore et encore. Et là, à Singapour, on a 64% des élèves qui trouvaient la bonne réponse. En

Intervenant 20:34

France,

Intervenant 10:36

15%.

Intervenant 20:37

Ah oui, le fameux 15%.

Intervenant 10:38

C'est ça. Ce gouffre statistique, c'est exactement ce qui alimente ce marronnier absolu de l'actualité éducative. À chaque publication des enquêtes internationales, TIMSS et PISA, c'est le même scénario.

Intervenant 20:49

La panique totale.

Intervenant 10:50

Oui, panique médiatique générale, des gros titres sur la chute libre du niveau de la jeunesse et enfin une perplexité totale qui s'installe dans la société. Tout le monde regarde ce fameux thermomètre éducatif avec angoisse, la peur au ventre.

Intervenant 21:06

Et la réaction première face à cette angoisse, en fait, c'est presque toujours de se limiter à la lecture de ces classements réducteurs. On lit les classements et on s'arrête là.

Intervenant 11:16

On cherche des coupables, souvent.

Intervenant 21:18

Absolument. On se lamente sur des chiffres simplistes, on pointe du doigt. Mais l'objectif de notre analyse en profondeur aujourd'hui, c'est pas du tout de distribuer des bons ou des mauvais points, ni de céder à la panique.

Intervenant 11:29

D'accord, donc on prend du recul.

Intervenant 21:30

Exactement. L'idée, c'est de prendre ce recul nécessaire pour décortiquer ce que mesurent réellement ces enquêtes. Parce que derrière le chiffre choc brandi au journal télévisé,

Intervenant 11:40

le fameux classement où on a perdu trois places là,

Intervenant 21:43

Voilà. Derrière ça, il y a des milliers de pages de rapports, des méthodologies très pointues et surtout des variables passionnantes. Des données que, soyons tout à fait honnêtes, presque personne ne prend le temps d'analyser dans leur intégralité.

Intervenant 11:58

C'est très clair. Alors déballons tout ça. Si l'on dépasse la simple note globale, qu'est-ce que ce fameux terme honnête mesure vraiment ?

Intervenant 22:05

C'est la bonne question.

Intervenant 12:06

Parce qu'on entend souvent dire que ces tests sont biaisés ou que le niveau baisse pas tant que ça en réalité. Pourtant, quand on regarde les données brutes, il y a de quoi s'interroger.

Intervenant 22:15

Oh que oui ! Entre 2003 et 2015 par exemple, la France a connu une baisse très claire dans l'enquête PISA en glissant de l'indice 511 à 493.

Intervenant 12:25

C'est une baisse qu'on ne peut pas ignorer. Et pendant ce même laps de temps, la Russie, elle, grimpait de 468 à 494. Donc on ne peut pas balayer ça d'un revers de main en parlant de simple marge d'erreur, si ?

Intervenant 22:39

Absolument pas. Les variations de score que l'on observe, elles sont réelles et elles sont statistiquement significatives. Les lignes bougent, c'est un fait indéniable. Quelque chose de profond se transforme dans l'enseignement et dans l'apprentissage. Mais l'erreur fondamentale, ce serait de croire que PISA ou TIMSS se contentent de délivrer une simple note sur 20.

Intervenant 12:59

Oui, comme un bulletin scolaire classique.

Intervenant 23:00

Voilà, c'est bien plus vaste. La véritable richesse de ces rapports, ce sont ce qu'on appelle les variables contextuelles.

Intervenant 13:07

Les variables contextuelles ?

Intervenant 23:08

Oui, ce sont des questionnaires très détaillés qui accompagnent les épreuves de mathématiques et qui vont évaluer tout ce qui entoure l'élève au quotidien.

Intervenant 13:16

Attendez, quand on parle de variables contextuelles, pour notre audience, on parle de l'environnement matériel, genre la taille des classes, les budgets alloués, ce genre de choses.

Intervenant 23:26

Il y a de cela, oui, tout à fait. On y croise les résultats avec les investissements financiers, le nombre d'élèves par classe, la qualité de la formation continue des professeurs aussi.

Intervenant 13:35

Ah, intéressant !

Intervenant 23:37

Mais on y évalue aussi, et c'est souvent crucial, le climat scolaire et l'état psychologique des élèves. Quel est leur degré d'anxiété face aux mathématiques, par exemple ? Prennent-ils du plaisir à résoudre un problème ?

Intervenant 13:47

Le plaisir en maths, vaste sujet.

Intervenant 23:49

N'est-ce pas ? Mais avant même d'analyser ces variables, il faut impérativement clarifier une différence d'ADN fondamentale entre ces deux grandes enquêtes.

Intervenant 13:58

TIMSS et PISA donc.

Intervenant 24:01

C'est ça. On les cite souvent côte à côte, comme si elles mesuraient la même chose, alors que leurs philosophies sont diamétralement opposées.

Intervenant 14:09

Ah bon ?

Intervenant 24:09

Oui. TIMSS en fait évalue des connaissances purement mathématiques et académiques. On vérifie, de manière assez classique, si l'élève maîtrise le programme scolaire officiel.

Intervenant 14:20

Le fameux programme de l'éducation nationale en l'occurrence.

Intervenant 24:23

Exactement. Alors que PISA, en revanche, n'évalue pas le programme scolaire.

Intervenant 14:28

Pas du

Intervenant 24:29

tout. Non, pas directement. PISA évalue ce qu'on appelle la littératie.

Intervenant 14:33

La littératie, alors ça c'est un terme qu'on croise très souvent en linguistique ou dans l'apprentissage de la lecture.

Intervenant 24:39

Tout à fait.

Intervenant 14:40

Mais appliqué aux mathématiques, c'est un concept qui peut paraître un peu flot. Concrètement, qu'est-ce qu'on attend d'un élève quand on évalue sa littératie mathématique ?

Intervenant 24:47

Eh bien, c'est la capacité d'un individu à mobiliser son savoir pour comprendre et utiliser l'information dans des situations de la vie courante.

Intervenant 14:55

D'accord, la vie de tous les jours.

Intervenant 24:56

C'est ça.