ABSTRACT
ABSTRACT Objective: The purpose of our study is to evaluate intraobserver and interobserver reliability of modified Waldenström classification system for Legg-Calvé-Perthes disease and assess the influence of the professional's area of expertise in the assessment. Methods: Twelve evaluators assessed 40 pairs of pelvic radiographs of patients with Legg-Calvé-Perthes disease. After two weeks, a new evaluation was performed by the same evaluators. Kappa and Kendall's W indexes were used to evaluate both intraobserver and interobserver reliability and determine the influence of the evaluators' experience and area of expertise. Results: The average intraobserver kappa value was 0.394, with a reasonable agreement level. The interobserver Kappa value was 0.243 in the first evaluation (95% CI, 0.227-0.259 and p < 0.0001) and 0.245 in the second evaluation (95% CI, 0.229-0.260 and p < 0.0001). The Kendall's W values obtained for pediatric orthopedists, radiologists and resident physicians were 0.686, 0.630 and 0.529 (p < 0.0001), respectively. Conclusion: The modified Waldenström classification presented both moderate and reasonable levels of intraobserver agreement, and reasonable level of interobserver agreement. The evaluators' degree of experience and area of expertise influenced the concordance level found. Level of Evidence II, Diagnostic Studies - Investigating a Diagnostic Test.
RESUMO Objetivo: O objetivo deste estudo é avaliar a confiabilidade intraobservador e interobservador do sistema de classificação de Waldenström modificado para a doença de Legg-Calvé-Perthes e avaliar a influência da experiência do profissional na avaliação. Métodos: Doze avaliadores analisaram 40 pares de radiografias pélvicas de pacientes com doença de Legg-Calvé-Perthes. Após duas semanas, nova avaliação foi realizada pelos mesmos avaliadores. Os índices Kappa e Kendall's W foram usados para analisar a confiabilidade intraobservador e interobservador e para determinar a influência da experiência e perícia dos avaliadores. Resultados: O valor médio do kappa intraobservador foi de 0,394, com razoável concordância. O valor de Kappa interobservador foi de 0,243 na primeira avaliação (IC 95%, 0,227-0,259 e p < 0,0001) e 0,245 na segunda (IC 95%, 0,229-0,260 e p < 0,0001). Os valores W de Kendall obtidos para ortopedistas pediátricos, radiologistas e médicos residentes foram 0,686, 0,630 e 0,529 (p < 0,0001), respectivamente. Conclusão: A classificação de Waldenström modificada apresentou níveis moderados e razoáveis de concordância intraobservador e razoável concordância interobservador. O grau de experiência e especialização dos avaliadores influenciou o nível de concordância encontrado. Nível de Evidência II, Estudos diagnósticos - Investigação de um exame para diagnóstico.