Comment améliorer la qualité des examens QCM à l’université sur base d’une analyse des items? L’exemple de l’UCL.

(2014) Communication présentée au 26ème colloque de l’ADMEE Europe — Location: Marrakech

Files

QualitéexamensQCM_ADMEEEurope_2014_BraibantLecroart.pdf
  • Open Access
  • Adobe PDF
  • 460.72 KB

Details

Authors
Abstract
Le service d’évaluation en appui de la qualité (EVA) offre aux enseignants de l’UCL une aide logistique à l’évaluation des acquis des étudiants par QCM. Le système informatisé de conception et de correction des examens qui a été choisi, ConTest (Consilium Benelux, 2012), permet de réaliser différentes analyses statistiques des résultats : calcul d’un coefficient de fidélité (alpha de Cronbach), étude des indices de difficulté et de discrimination, relation entre la difficulté et le pouvoir discriminant de l’item, caractéristiques de la distribution de fréquence des leurres, etc. Pour chaque examen, les résultats de ces analyses d’items sont présentés dans un rapport qui est transmis aux enseignants. Le service EVA leur offre un accompagnement individuel qui les aide à interpréter et à exploiter ces rapports afin améliorer la qualité de leur QCM et des items qui le composent. Au niveau de l’ensemble de l’université, nous avons rassemblé actuellement des données relatives à plus de 500 examens. On observe une grande variabilité des pratiques en ce qui concerne le nombre d’items proposés par les enseignants, le nombre d’options de réponse par question, les barèmes de notation, l’utilisation ou non d’une pénalisation en cas de mauvaise réponse, etc. Le croisement de ces variables avec les indicateurs psychométriques issus des analyses d’items (alpha de Cronbach, indice de discrimination, indice de difficulté) permet de formuler des balises et des recommandations qui devraient aider les enseignants à améliorer la fidélité et la validité de leurs QCM.
Affiliations

Citations

Braibant, J.-M. (2014). Comment améliorer la qualité des examens QCM à l’université sur base d’une analyse des items? L’exemple de l’UCL. Communication présentée au 26ème colloque de l’ADMEE Europe, Marrakech. https://hdl.handle.net/2078.5/182830