L’analyse d’items vérifie le bon fonctionnement de chaque question d’un test. Le calculateur de difficulté et de discrimination d’item prend la taille des groupes haut et bas, les bonnes réponses de chacun et le nombre de choix, et donne l’indice de difficulté, l’indice de discrimination, le niveau de hasard et la difficulté idéale.
Comment se fait le calcul
- Classez les candidats selon leur score total et prenez le groupe haut et le groupe bas, souvent les 27 % les plus forts et les plus faibles, de même taille n.
- L’indice de difficulté est la proportion de bonnes réponses dans les deux groupes : p = (réussites haut + réussites bas) ÷ (2 × n). Un p élevé désigne un item facile.
- L’indice de discrimination est l’écart entre les groupes : D = (réussites haut − réussites bas) ÷ n. Il va de −1 à +1.
- La difficulté idéale d’un item à choix multiples est à mi-chemin entre le hasard, qui vaut 1 ÷ choix, et 1 : (1 + 1 ÷ choix) ÷ 2.
Exemple
Un item est posé aux 40 meilleurs et aux 40 moins bons candidats, avec 5 choix. 31 du groupe haut et 21 du groupe bas répondent correctement. La difficulté est 52 ÷ 80 = 0,650, proche de l’idéal de 0,600. La discrimination est 10 ÷ 40 = 0,250, ce qui est moyen. Le niveau de hasard est de 0,20.
Pourquoi c’est utile
Un test vaut ce que valent ses questions. L’analyse d’items repère celles qui sont trop faciles, trop difficiles, mal corrigées ou incapables de séparer les bons élèves des faibles, pour les corriger avant la prochaine utilisation.
À savoir
Les indices viennent de petits groupes et sont bruités, donc servez-vous-en comme d’alertes et non de verdicts. Ils supposent aussi un test qui mesure une compétence principale, et un item d’un test mixte peut sembler faible tout en mesurant quelque chose d’important. Examinez les items signalés avant de les supprimer.
Outils liés
Le calculateur d’alpha de Cronbach mesure la cohérence de tout le test, et celui de percentile situe un score au sein d’un groupe.