Aller au contenu
Omnikalc

Calculateur de l’alpha de Krippendorff (deux codeurs, binaire)

Saisissez le nombre d’unités que les deux codeurs ont notées oui, notées non, et celles où ils sont en désaccord pour obtenir l’alpha de Krippendorff, le désaccord observé et attendu et le pourcentage d’accord.

Mis à jour le
Vos paramètres

Valeur hors limites

Valeur hors limites

Valeur hors limites

Résultats

Alpha de Krippendorff

0,748

Pourcentage d’accord

87,5 %

Unités codées
80
Désaccord observé
0,1250
Désaccord attendu
0,4953
Part de oui parmi tous les codes
56,3 %

Le calculateur de l’alpha de Krippendorff pour deux codeurs donne l’accord au-delà du hasard entre deux codeurs qui ont noté des unités oui ou non, d’après le nombre d’unités notées oui par les deux, notées non par les deux et celles où ils sont en désaccord, avec le pourcentage d’accord.

Comment se fait le calcul

  • Saisissez le nombre d’unités notées oui par les deux codeurs et non par les deux.
  • Saisissez le nombre d’unités où ils sont en désaccord.
  • Lisez l’alpha, le pourcentage d’accord et les désaccords.

Exemple

Avec 40 unités notées oui par les deux, 30 notées non par les deux et 10 désaccords, il y a 80 unités. Le pourcentage d’accord est de 87,5 %, mais le désaccord attendu est de 0,4953 contre 0,1250 observé, ce qui donne un alpha de 0,748. Le code oui est utilisé dans 56,3 % de tous les codes.

Pourquoi c’est utile

Le calculateur aide les chercheurs en analyse de contenu, codage qualitatif, annotation médicale et étiquetage d’apprentissage automatique qui doivent rapporter la fidélité d’un codage binaire par deux personnes, et la comparer aux seuils habituels de publication.

À savoir

Comptez chaque unité une fois, avec les deux codes connus. Pour plus de deux codeurs, des codes manquants ou plus de deux catégories, utilisez la formule générale de l’alpha avec une matrice de coïncidences. L’alpha dépend de la prévalence du code : quand un code est rare, quelques désaccords baissent beaucoup l’alpha. Rapportez à la fois le pourcentage d’accord et l’alpha, avec le nombre d’unités, pour que les lecteurs puissent juger le résultat. Entraînez les codeurs sur un échantillon avant le vrai codage, rédigez un manuel de codage clair, et vérifiez de nouveau l’accord pendant le travail pour détecter toute dérive des codeurs dans le temps.

Outils liés

Le calculateur du kappa de Cohen donne un indice semblable pour deux évaluateurs, celui de la corrélation intraclasse traite les notes continues, celui de la corrélation de concordance de Lin vérifie l’accord de mesures et celui de la matrice de confusion résume des classements.

Questions fréquentes

Qu’est-ce que l’alpha de Krippendorff ?

L’alpha de Krippendorff est une mesure de l’accord entre codeurs qui corrige l’accord attendu par hasard. Il est défini par α = 1 − Do / De, où Do est le désaccord observé et De le désaccord attendu si les codes étaient attribués au hasard avec les mêmes fréquences. Une valeur de 1 est un accord parfait et 0 le niveau du hasard.

En quoi diffère-t-il du pourcentage d’accord ?

Le pourcentage d’accord compte seulement la part des unités où les codeurs sont d’accord. Quand un code est très courant, les codeurs sont souvent d’accord par pur hasard et le pourcentage d’accord paraît élevé. L’alpha retire la part due au hasard, donc un jeu de données avec 90 pour cent d’accord peut avoir un alpha faible si presque toutes les unités sont codées oui.

Quelle valeur est acceptable ?

Krippendorff a proposé que α ≥ 0,80 soit fiable, et 0,667 ≤ α < 0,80 ne permette que des conclusions provisoires. Des valeurs plus basses signifient que les données ne sont pas assez fiables pour la plupart des usages. Les seuils sont des repères et dépendent du coût des erreurs dans l’usage des données.

Pourquoi utiliser l’alpha plutôt que le kappa de Cohen ?

L’alpha traite n’importe quel nombre de codeurs, les données manquantes et tout type d’échelle, alors que le kappa de Cohen est limité à deux codeurs. Pour deux codeurs et un code binaire, les valeurs sont très proches, et l’alpha est un peu plus bas pour de petits échantillons car il corrige la taille de l’échantillon. Ce calculateur couvre le cas à deux codeurs et un code binaire.

Ce calculateur vous a-t-il été utile ?

Merci pour votre avis !

Résultats indicatifs fournis à titre d'information. Ils ne remplacent pas l'avis d'un professionnel.