Avaliaçäo das estruturas de concordância e discordância nos estudos de confiabilidade / Rating of the structures of agreement and disagreement in reliability studies

RESUMO

O coeficiente kappa tem sido, nos últimos anos, a medida preferida pelos epidemiologistas no estudo de confiabilidade das informaçöes. Trabalhos mostram que essa medida possui sérias restriçöes, em determinadas situaçöes. Recentemente, modelos estatísticos foram propostos para a análise de concordância com as avaliaçöes assumindo uma escala ordinal, como alternativa ao kappa. Assim, realizou-se estudo com o objetivo de mostrar que existe uma classe de modelos log-lineares que analisados seqüencialmente permitem identificar padröes de concordância e discordância presentes nos dados. Usando os dados de um estudo de caso-controle a respeito do efeito da freqüência de consumo de álcool em relaçäo às doenças coronarianas, uma seqüência de modelos log-lineares hierárquicos foi ajustada objetivando-se encontrar o "melhor" modelo. Utilizou-se uma medida de razäo de chances para quantificar a concordância. Obteve-se um kappa ponderado igual a 0,685 com IC de 95 por cento (0,638-0,732), indicando que existe uma boa concordância. No entanto, ele näo fornece nenhuma informaçäo a respeito da estrutura de concordância e discordância. Entre a seqüência de modelos analisados, aquele que melhor se ajustou forneceu uma estimativa de 0,4454 com IC de 95 por cento (0,1300-0,7608) para a concordância e uma estimativa de 1,3309 com IC de 95 por cento (0,9649-1,6978) para associaçäo. A medida tau para categorias adjacentes foi igual a 9,2 com IC de 95 por cento (6,0-14,2). Portanto, além de existir uma evidência de que as avaliaçöes feitas pelos respondentes säo muito parecidas, as altas (baixas) avaliaçöes feitas por respondentes primários tendem estar associadas com altas (baixas) avaliaçöes feitas por respondentes secundários. O uso de modelos log-lineares proporciona aos estudos de confiabilidade análise mais completa e informativa a respeito das avaliaçöes entre observaçöes emparelhadas do que a realizada pelo kappa ponderado. Concluiu-se que o uso indiscriminado do coeficiente kappa, como única medida resumidora da concordância, deve ser questionado. Apresenta-se um programa para ajustamento desses modelos, utilizando-se o PROC GENMOD do pacote estatístico SAS