Focus sur les Tables de spécification (TDS)

Abstract

Cette conférence intitulée "Focus sur les Tables de spécification (TDS)" est en lien avec les évaluations communes des acquis des élèves de l’enseignement obligatoire du canton de Genève dont un des buts est de fournir des repères externes pour évaluer les résultats des élèves et harmoniser les pratiques d'enseignement et d'évaluation. Pour ce faire, elles doivent être élaborées selon une méthodologie de qualité. La présentation aborde les fondements d’une approche qualité en ingénierie des évaluations, qui repose sur quatre facteurs clés et deux cadres contextuels et axiologiques. La validité est un critère essentiel : les évaluations doivent correspondre aux attentes, à ce qui est enseigné et à ce qui est évalué. D'autres critères de qualité incluent la fidélité, la sensibilité, la diagnosticité, l’équité, la praticabilité, la transparence, l’authenticité et l’empowerment. Un cycle de construction et de gestion qualité des évaluations (Gilles, 2023), basé sur la roue de Deming (Plan, Do, Check, Act), est présenté pour améliorer continuellement la qualité des évaluations. Un problème récurrent est le décalage entre le contenu enseigné, ce qui est prescrit et ce qui est évalué, menant souvent à des problèmes de validité. Une solution proposée est l'utilisation de la Table de spécification (TDS), définie comme un tableau à double entrée listant les Points à Evaluer (PE) et les Catégories de Performances (CP). La TDS aide à aligner les objectifs enseignés avec les évaluations, assurant que le curriculum prescrit est bien couvert. La TDS joue un rôle crucial dans le cycle de construction et de gestion qualité des évaluations. À l'étape d'analyse, elle aide à définir ce qui sera évalué. À l'étape de design, elle détermine comment évaluer ce qui a été défini. À l'étape d’opérationnalisation, elle est utilisée pour gérer les banques de questions. À l'étape d’information, elle exploite les résultats des évaluations. Enfin, aux étapes de traitements et de feedback, elle sert d’outil de diagnostic. En conclusion, l’élaboration d’évaluations communes de qualité nécessite une méthodologie rigoureuse et l'utilisation de TDS. Celles-ci permettent de s’assurer que les tests évaluent bien ce qu'ils sont censés évaluer, couvrant correctement les contenus importants et les différents niveaux cognitifs. Les TDS facilitent également la transparence dans la conception des tests et permettent une analyse diagnostique des résultats. De plus, elles aident à gérer les banques de questions et à structurer le travail collectif des enseignants.

This conference titled "Focus on Tables of Specification (ToS)" is related to the common assessments of student achievements in compulsory education in the canton of Geneva. One of its goals is to provide external benchmarks for evaluating student results and harmonizing teaching and assessment practices. To achieve this, the assessments must be developed according to a quality methodology. The presentation addresses the foundations of a quality approach in evaluation engineering, which is based on four key factors and two contextual and axiological frameworks. Validity is an essential criterion: evaluations must correspond to expectations, what is taught, and what is assessed. Other quality criteria include reliability, sensitivity, diagnosticity, equity, practicability, transparency, authenticity, and empowerment. A cycle of construction and quality management of evaluations (Gilles, 2023), based on the Deming wheel (Plan, Do, Check, Act), is presented to continuously improve the quality of evaluations. A recurring problem is the gap between the content taught, what is prescribed, and what is assessed, often leading to validity issues. A proposed solution is the use of the Table of Specification Table (ToS), defined as a two-entry table listing the Points to Evaluate (PE) and the Categories of Performance (CP). The ToS helps align the teaching objectives with the evaluations, ensuring that the prescribed curriculum is well covered. The ToS plays a crucial role in the cycle of construction and quality management of evaluations. At the analysis stage, it helps define what will be evaluated. At the design stage, it determines how to evaluate what has been defined. At the operationalization stage, it is used to manage question banks. At the information stage, it leverages the evaluation results. Finally, at the treatment and feedback stages, it serves as a diagnostic tool. In conclusion, developing high-quality common assessments requires a rigorous methodology and the use of ToS. These ensure that tests accurately evaluate what they are supposed to, covering important content and different cognitive levels correctly. ToS also facilitate transparency in test design and enable diagnostic analysis of results. Additionally, they help manage question banks and structure collective work among teachers.