The expert panel for Script Concordance Tests: A truly adequate reference?

Abstract

Les tests de concordance de script (TCS) constituent une modalité docimologique introduite par arrêté dans les épreuves dématérialisées en 2024. Leur objectif serait d’évaluer le raisonnement clinique en situation d’incertitude. En pratique, les TCS interrogent l’étudiant sur l’impact d’une nouvelle information sur la probabilité d’une hypothèse formulée a priori à partir d’une situation clinique authentique. Cette démarche s’apparente au raisonnement probabiliste (ou bayésien). En raison de l’incertitude liée à la situation clinique explorée, les TCS ne confrontent pas la réponse de l’étudiant à celle attendue dans un référentiel de connaissances théoriques. C’est la distribution des réponses d’un panel de médecins expérimentés qui sert à établir le barème de la question. Les données de la littérature suggèrent que les médecins, même expérimentés, comme la plupart des humains ont un raisonnement probabiliste intuitif le plus souvent biaisé. Ces biais posent la question de la pertinence d’utiliser les réponses du panel d’experts comme barème de notation pour les TCS.