Saltar al contenido
Omnikalc

Calculadora del alfa de Krippendorff (dos codificadores, binario)

Introduce el número de unidades que los dos codificadores han puntuado como sí, como no, y aquellas en las que discrepan para obtener el alfa de Krippendorff, el desacuerdo observado y esperado y el porcentaje de acuerdo.

Actualizado el
Tus datos

Valor fuera de rango

Valor fuera de rango

Valor fuera de rango

Resultados

Alfa de Krippendorff

0,748

Porcentaje de acuerdo

87,5 %

Unidades codificadas
80
Desacuerdo observado
0,1250
Desacuerdo esperado
0,4953
Proporción de síes entre todos los códigos
56,3 %

La calculadora del alfa de Krippendorff para dos codificadores da el acuerdo más allá del azar entre dos codificadores que han puntuado unidades como sí o no, según el número de unidades puntuadas como sí por ambos, como no por ambos y aquellas en las que discrepan, con el porcentaje de acuerdo.

Cómo se hace el cálculo

  • Introduce el número de unidades puntuadas como sí por los dos codificadores y como no por los dos.
  • Introduce el número de unidades en las que están en desacuerdo.
  • Lee el alfa, el porcentaje de acuerdo y los desacuerdos.

Ejemplo

Con 40 unidades puntuadas como sí por ambos, 30 puntuadas como no por ambos y 10 desacuerdos, hay 80 unidades. El porcentaje de acuerdo es del 87,5 %, pero el desacuerdo esperado es de 0,4953 frente a 0,1250 observado, lo que da un alfa de 0,748. El código sí se utiliza en el 56,3 % de todos los códigos.

Por qué es útil

La calculadora ayuda a investigadores en análisis de contenido, codificación cualitativa, anotación médica y etiquetado para aprendizaje automático que deben informar de la fiabilidad de una codificación binaria realizada por dos personas, y compararla con los umbrales habituales de publicación. Es útil, por ejemplo, en un trabajo de fin de grado o de máster en el que dos personas clasifican entrevistas o textos y hay que justificar la calidad de los datos.

Qué conviene saber

Cuenta cada unidad una vez, con los dos códigos conocidos. Para más de dos codificadores, códigos ausentes o más de dos categorías, utiliza la fórmula general del alfa con una matriz de coincidencias. El alfa depende de la prevalencia del código: cuando un código es raro, unos pocos desacuerdos bajan mucho el alfa. Informa tanto del porcentaje de acuerdo como del alfa, con el número de unidades, para que los lectores puedan juzgar el resultado. Entrena a los codificadores con una muestra antes de la codificación real, redacta un manual de codificación claro, y comprueba de nuevo el acuerdo durante el trabajo para detectar cualquier deriva de los codificadores con el tiempo.

Herramientas relacionadas

La calculadora del kappa de Cohen da un índice parecido para dos evaluadores, la de correlación intraclase trata las puntuaciones continuas, la de correlación de concordancia de Lin comprueba el acuerdo de mediciones y la de matriz de confusión resume clasificaciones.

Preguntas frecuentes

¿Qué es el alfa de Krippendorff?

El alfa de Krippendorff es una medida del acuerdo entre codificadores que corrige el acuerdo esperado por azar. Se define por α = 1 − Do / De, donde Do es el desacuerdo observado y De el desacuerdo esperado si los códigos se asignaran al azar con las mismas frecuencias. Un valor de 1 es un acuerdo perfecto y 0 el nivel del azar.

¿En qué se diferencia del porcentaje de acuerdo?

El porcentaje de acuerdo solo cuenta la proporción de unidades en las que los codificadores coinciden. Cuando un código es muy común, los codificadores coinciden a menudo por puro azar y el porcentaje de acuerdo parece alto. El alfa descuenta la parte debida al azar, de modo que un conjunto de datos con un 90 por ciento de acuerdo puede tener un alfa bajo si casi todas las unidades se codifican como sí.

¿Qué valor es aceptable?

Krippendorff propuso que α ≥ 0,80 sea fiable, y que 0,667 ≤ α < 0,80 solo permita conclusiones provisionales. Los valores más bajos significan que los datos no son lo bastante fiables para la mayoría de los usos. Los umbrales son referencias y dependen del coste de los errores en el uso de los datos.

¿Por qué usar el alfa en lugar del kappa de Cohen?

El alfa admite cualquier número de codificadores, datos ausentes y cualquier tipo de escala, mientras que el kappa de Cohen se limita a dos codificadores. Para dos codificadores y un código binario, los valores son muy próximos, y el alfa es algo más bajo en muestras pequeñas porque corrige el tamaño de la muestra. Esta calculadora cubre el caso de dos codificadores y un código binario.

¿Te ha resultado útil esta calculadora?

¡Gracias por tu opinión!

Resultados orientativos con fines informativos. No sustituyen el consejo de un profesional.