Aller au contenu
Omnikalc

Calculateur de corrélation intraclasse : vos évaluateurs sont-ils fiables ?

Saisissez les carrés moyens d’une analyse de variance à deux facteurs, avec les nombres de sujets et d’évaluateurs, pour obtenir les cinq coefficients de corrélation intraclasse usuels.

Mis à jour le
Vos paramètres

Valeur hors limites

Valeur hors limites

Valeur hors limites

Valeur hors limites

Valeur hors limites

Résultats

CCI(2,1) : un évaluateur, effets aléatoires à deux facteurs, accord absolu

0,628

Fiabilité modérée
CCI(1,1) : un évaluateur, effets aléatoires à un facteur
0,629
CCI(3,1) : un évaluateur, modèle mixte à deux facteurs, cohérence
0,620
CCI(2,k) : moyenne de k évaluateurs, accord absolu
0,871
CCI(3,k) : moyenne de k évaluateurs, cohérence
0,867

Le coefficient de corrélation intraclasse, ou CCI, mesure la fiabilité de notes ou de mesures données par plusieurs évaluateurs. Le calculateur de corrélation intraclasse prend les carrés moyens d’une analyse de variance à deux facteurs, le nombre de sujets et le nombre d’évaluateurs, et donne le CCI(1,1), le CCI(2,1), le CCI(3,1), le CCI(2,k) et le CCI(3,k).

Comment se fait le calcul

  • Faites une analyse de variance à deux facteurs sur les notes, avec les sujets en lignes et les évaluateurs en colonnes. Relevez les carrés moyens des sujets (CMR), des évaluateurs (CMC) et de l’erreur (CME).
  • CCI(3,1) = (CMR − CME) ÷ (CMR + (k − 1) × CME) mesure la cohérence pour un seul évaluateur, k étant le nombre d’évaluateurs.
  • CCI(2,1) = (CMR − CME) ÷ (CMR + (k − 1) × CME + k × (CMC − CME) ÷ n) mesure l’accord absolu, et il est plus bas quand les évaluateurs diffèrent systématiquement.
  • CCI(1,1) utilise le carré moyen intra-sujet CMW = (CMC + (n − 1) × CME) ÷ n. Les versions pour la moyenne de k évaluateurs sont CCI(2,k) = (CMR − CME) ÷ (CMR + (CMC − CME) ÷ n) et CCI(3,k) = (CMR − CME) ÷ CMR.

Exemple

Quatre évaluateurs notent 15 sujets. L’analyse de variance donne CMR = 38,4, CMC = 2,5 et CME = 5,1. Alors CCI(3,1) = 33,3 ÷ 53,7 = 0,620, et CCI(2,1) = 33,3 ÷ 53,01 = 0,628. CCI(1,1) vaut 0,629, et la fiabilité de la moyenne des quatre évaluateurs est de 0,871 pour l’accord absolu et de 0,867 pour la cohérence. Un évaluateur seul est dans la zone modérée.

Pourquoi c’est utile

Avant d’utiliser une échelle, un test ou un panel d’évaluateurs, il faut savoir si l’on peut se fier aux notes. Le CCI répond par un seul nombre, et les cinq formes correspondent aux plans d’étude usuels, de sorte qu’on peut le rapporter comme les revues l’attendent.

À savoir

Les formules suivent Shrout et Fleiss et utilisent les carrés moyens d’une analyse de variance sans données manquantes. Elles donnent des estimations ponctuelles et non des intervalles de confiance, qui demandent la loi F et le plan exact. Des valeurs négatives peuvent apparaître quand la variance de l’erreur dépasse celle des sujets, et on les rapporte en général comme nulles.

Outils liés

Le calculateur d’alpha de Cronbach mesure la cohérence interne d’une échelle, et celui de kappa de Cohen mesure la concordance pour des catégories.

Questions fréquentes

Que mesure la corrélation intraclasse ?

Elle mesure la part de la variation des notes qui vient de vraies différences entre sujets plutôt que de différences entre évaluateurs ou d’erreur aléatoire. Une valeur proche de 1 signifie que les évaluateurs sont d’accord, et une valeur proche de 0 que les notes sont surtout du bruit.

Quelle forme de CCI choisir ?

Choisissez selon le plan d’étude. Utilisez le CCI(1) si chaque sujet est noté par un groupe aléatoire différent d’évaluateurs, le CCI(2) si les mêmes évaluateurs notent tous les sujets et sont un échantillon d’évaluateurs possibles, et le CCI(3) si ces évaluateurs précis sont les seuls qui comptent. Utilisez la forme à un évaluateur si un seul sera employé en pratique, et la forme moyenne si vous en moyennerez plusieurs.

Quelle différence entre accord absolu et cohérence ?

L’accord absolu exige que les évaluateurs donnent les mêmes notes. La cohérence exige seulement qu’ils classent les sujets dans le même ordre, donc un évaluateur qui note toujours deux points plus haut reste cohérent. L’accord est le critère le plus strict et il est préféré quand les notes sont comparées entre évaluateurs.

Quelles valeurs sont acceptables ?

Un repère courant qualifie de faibles les valeurs sous 0,5, de modérées de 0,5 à 0,75, de bonnes de 0,75 à 0,9 et d’excellentes au-dessus de 0,9. Le niveau nécessaire dépend de l’usage des notes. Les décisions cliniques sur des individus demandent une fiabilité plus élevée que les comparaisons de moyennes de groupes.

Ce calculateur vous a-t-il été utile ?

Merci pour votre avis !

Résultats indicatifs fournis à titre d'information. Ils ne remplacent pas l'avis d'un professionnel.