Evaluación de la concordancia inter-observador en investigación pediátrica: coeficiente de Kappa / Evaluation of the interobserver concordance in pediatric research: the Kappa coefficient

ABSTRACT

Numerous pediatric research protocols are designed for assessing the degree of concordance between two observers; in other words, to determine the extent of their agreement. In order to determine the interobserver concordance, a frequently used statistical tool is available the Kappa Coefficient (k). The present article explains the theoretical background of this coefficient, the methodology employed for its calculation and the way in which its value is correctly interpreted. In simple terms, Kappa Coefficient (k) corresponds to the proportion of concordances observed among the total number of observations, having excluded all random concordances. Kappa Coefficient (k) adopts a value between -1 y +1, being the strongest degree of interobserver concordance equal to +1. On the contrary, a value of K = 0 reflects that the observed concordance is precisely the one that is expected by chance. The interpretation of Kappa Coefficient (k) is performed by correlating its value with a qualitative scale, which includes six level of strength of agreement ("poor", "slight", "fair", "moderate", "substantial" and "almost perfect"), simplifying its comprehension.

RESUMEN

Numerosos protocolos de investigación en pediatría son diseñados para conocer el grado de concordancia entre dos observadores, es decir, hasta qué punto ambos coinciden en su medición. Para determinar el grado de concordancia inter-observador se dispone de una herramienta estadística frecuentemente utilizada, el coeficiente kappa (k). El presente artículo explica el fundamento teórico de este coeficiente, su metodología de cálculo y la forma en que se interpreta correctamente su valor, ejemplificando estos conceptos mediante una investigación real. En términos simples, el coeficiente kappa (k) corresponde a la proporción de concordancias observadas sobre el total de observaciones, habiendo excluido las concordancias atribuibles al azar. El coeficiente kappa (k) toma valores entre -1 y +1; mientras más cercano a +1, mayor es el grado de concordancia inter-observador. Por el contrario, un valor de K = 0 refleja que la concordancia observada es precisamente la que se espera a causa exclusivamente del azar. La interpretación del coeficiente kappa se realiza correlacionando su valor con una escala cualitativa que incluye seis niveles de fuerza de concordancia ("pobre", "leve", "aceptable", "moderada", "considerable" y "casi perfecta"), simplificando la comprensión del mismo.