Cette étude examine dans quelle mesure les scores des élèves en lecture, en mathématiques, en sciences et au test des matrices progressives de Raven reflètent la capacité générale g et les capacités spécifiques à un domaine avec des données de 3 472 étudiants polonais qui ont participé au programme 2009 de l’OCDE pour le suivi international des acquis des élèves (PISA) et qui ont été retestés avec les mêmes instruments PISA, mais avec un ensemble de questions différent, en 2010.
La variance des réponses des élèves aux questions de l’évaluation s’explique mieux par un modèle bifactoriel de théorie de la réponse aux questions (TRI) que par le modèle multidimensionnel TRI couramment utilisé pour mettre à l’échelle le PISA et d’autres EGE. Le modèle IRT bifactoriel suppose que les facteurs non g (lecture, mathématiques, sciences et test de Raven) ne sont pas corrélés avec g et entre eux. Le modèle bifactoriel génère des facteurs de capacité spécifiques avec des relations théoriquement plus crédibles avec les variables de critère que le modèle standard multidimensionnel. Des analyses plus poussées du modèle bifactoriel indiquent que les facteurs spécifiques au domaine ne sont pas suffisamment fiables pour être interprétés de manière significative. Ils se situent quelque part entre des mesures non fiables des capacités spécifiques à un domaine et des facteurs de nuisance reflétant une erreur de mesure.
 |
| Les corrélations entre les résultats PISA des sujets et d’autres variables — notes scolaires, plaisir de lire, statut socio-économique, temps d’apprentissage et sexe — sont considérablement réduites (parfois à zéro) lorsque l’intelligence générale est incluse dans le modèle de mesure. En d’autres termes, toute relation causale possible entre ces variables et la performance dans le domaine scolaire peut être principalement/complètement expliquée par la relation entre la variable et le QI. Ces variables ont peu d’influence causale sur les résultats PISA, indépendamment de l’intelligence. |
Les résultats indiquent qu’un modèle d’échelle qui tient compte de la capacité cognitive générale correspond mieux aux données que les modèles généralement utilisés dans les évaluations à grande échelle qui ignorent l’influence de la capacité générale sur le rendement des élèves. La conclusion selon laquelle les réponses des élèves aux questionsdu test PISA reflètent des capacités générales plutôt que des capacités spécifiques à un domaine, si elle est reproduite dans d’autres pays, pourrait avoir des implications importantes pour la conception d’évaluations à grande échelle et l’interprétation des analyses des données d’évaluation à grande échelle.
Source : APA PsycNet
Voir aussi
PISA — analyse des résultats de la Finlande (en baisse) et de l’Estonie (1re en Occident)
Allemagne — les élèves issus de l’immigration ont des résultats « nettement inférieurs »
Après deux décennies de tests PISA pourquoi les résultats n’augmentent-ils pas plus ?
Suède — La baisse du niveau scolaire en partie imputable à l’immigration ?
Éducation — La France a l’un des budgets les plus élevés au monde avec des résultats en baisse
Nathalie Bulle sur le modèle finlandais et les tests PISA [de quels acquis parle-t-on ?]
Enquête PISA (2018) : des résultats qu’il faut savoir nuancer
