Validación del Índice de Gravedad de servicios clínicos en neurología, Hospital Hermanos Ameijeiras / Validation of the severity of illness index of the clinical services in neurology, Hermanos Ameijeiras hospital

Introducción: en los análisis comparativos del desempeño hospitalario a partir de indicadores de resultados, la gravedad de los casos se destaca como importante factor de confusión. Objetivo: valorar la validez y confiabilidad del Índice de Gravedad de Servicios Clínicos desarrollado en el hospital Hermanos Ameijeiras. Métodos: investigación descriptiva retrospectiva realizada en en el servicio de neurología del citado hospital. La fuente de información fue la historia clínica de 336 pacientes egresados. Después de aplicar los criterios de exclusión, la muestra quedó conformada por 277 historias, de donde se extrajeron los datos necesarios. El período analizado abarcó desde enero a noviembre de 2008. Resultados: en cuanto a la validez conceptual, existió relación entre el estado al egreso y el índice de gravedad cuantitativo. La validez de criterio mostró un estadístico Kappa de 0,4998 (IC de 95 por ciento: 0,4160-0,5837) y un coeficiente de correlación entre el índice de severidad de la enfermedad de Horm y el índice de gravedad cuantitativo del hospital Hermanos Ameijeiras de 0,72 (p< 0,001). La concordancia interobservadores mostró un coeficiente de confiabilidad de 0,86 y un coeficiente de Kappa ponderado global de 0,75. El coeficiente de alfa de Cronbach fue de 0,62. Conclusiones: el Índice de Gravedad de Servicios Clínicos del hospital clinicoquirúrgico Hermanos Ameijeiras, tiene validez y confiabilidad aceptables, lo que lo hace útil para hacer una clasificación objetiva de la gravedad de los pacientes

Introduction: in the comparative analysis of the hospital performance based on the health outcome indicators, the severity of illness has become an important confounding factor. Objective: to assess the validity and reliability of the clinical severity of illness index of the Hermanos Ameijeiras hospital. Methods: retrospective and descriptive research at the neurological department at the cited hospital. The source of information was the medical histories of 329 patients discharged from the hospital. After applying the exclusion criteria, the final sample was made up of 277 histories from which the necessary data were drawn. The analyzed period covered January to November 2008. Results: in terms of conceptual validity, the state on discharge and the quantitative severity of illness index were related. The criterium quality showed Kappa's statistic of 0.4998 (IC de 95 percent 0.4160-0.5837) and a correlation coefficient between Horne's disease severity index and the quantitative severity index of the hospital equals to 0.72 (p< 0.001). The interrater agreement revealed a reliability coefficient of 0.86 and a global weighted Kappa coefficient of 0.75. Cronbach's alpha coefficient was 0.62. Conclusions: the severity of illness index of the clinical services at the neurological service of Hermanos Ameijeiras hospital is acceptable in terms of validity and reliability, which makes it useful for an objective classification of the severe condition of a patient

Utilidad del Índice de Gravedad de Servicios Clínicos del Hospital Hermanos Ameijeiras / Usefulness of the severity of illness index in the clinical services of Hermanos Ameijeiras hospital

Introducción: en los análisis comparativos del desempeño hospitalario a partir de indicadores de resultados, la gravedad de los casos se ha destacado como importante factor de confusión. Objetivo: valorar la utilidad, en términos de validez y confiabilidad, del Índice de Gravedad de Servicios Clínicos del Hospital Hermanos Ameijeiras en un servicio de atención médica. Métodos: se realizó una investigación descriptiva retrospectiva en el Servicio de Reumatología del hospital Hermanos Ameijeiras. La fuente de información fue la historia clínica de 339 pacientes egresados. Después de aplicar los criterios de exclusión, la muestra quedó conformada por 306 historias, de donde se extrajeron los datos necesarios. El período analizado abarcó desde enero a noviembre de 2008. Resultados: en relación con la validez conceptual, se observó que pudiera existir una relación entre el estado al egreso y el índice de gravedad cuantitativo. La validez de criterio mostró un estadístico Kappa de 0,47 (IC de 95 por ciento 0,3908-0,5431) y un coeficiente de correlación entre el Índice de Severidad de la Enfermedad de Horm y el Índice de Gravedad de Servicios Clínicos del Hospital Hermanos Ameijeiras, cuantitativo de 0,66 (p<0,001). La concordancia interobservadores evidenció un coeficiente de confiabilidad R de 0,81 y un coeficiente de Kappa ponderado global de 0,64. El coeficiente de alfa de Cronbach fue de 0,62. Conclusiones: el Índice de Gravedad de Servicios Clínicos del Hospital Hermanos Ameijeiras, tiene validez y confiabilidad aceptables, lo que lo hace útil para hacer una clasificación objetiva de la gravedad de los pacientes

Introduction: The severity of cases has become an important confounding factor in the comparative analyses of the hospital performance based on outcome indicators. Objective: To assess the usefulness, in terms of validity and reliability of the severity of illness index of the clinical services of Hermanos Ameijeiras hospital in a medical care service. Methods: A retrospective descriptive research was conducted in the rheumatology service of Hermanos Ameijeiras hospital. The source of information was the medical histories of 339 discharged patients. After applying the exclusion criteria, the sample was composed by 306 histories from which the necessary data were taken. The analyzed period was January to November, 2008. Results: Regarding the conceptual validity, it was observed that there might be a relationship between the condition of patient at discharge and the quantitative severity of illness index. The validity of the criterion showed a Kappa statistic of 0.47 (95 percent CI, 0.3908-0.5431) and a correlation coefficient between the Horm's severity of illness index and the severity of illness index of the clinical services of Hermanos Ameijeiras hospital, the quantitative index of 0.66 (p<0,001). The inter-observer agreement yielded a reliability coefficient of 0.81 and a global weighted Kappa coefficient of 0.64. Cronbach's alpha coefficient was 0.62. Conclusions: The severity index of the clinical services of Hermanos Ameijeiras hospital has acceptable validity and reliability, so it is useful to make an objective classification of the patient's severity

Dos procedimientos de ajuste por riesgo para la estadía hospitalaria como indicador de desempeño / Two risk adjustment methods for length of stay as indicator of hospital performance

Introducción: la estadía hospitalaria, es el indicador por excelencia de la eficiencia de los servicios prestados,cualquier valoración sobre el desempeño hospitalario que se realice a partir de este indicador debe contemplar de alguna manera las características de los pacientes que se utilizaron para estimar su valor. Objetivo: evaluar dos procedimientos de ajuste por riesgo para la estadía hospitalaria como indicador de desempeño. Métodos: se realizó un estudio retrospectivo en el servicio de medicina interna del hospital "Hermanos Ameijeiras" entre mayo y octubre de 2006. La muestra de 606 historias clínicas, se dividió aleatoriamente en dos partes: 304 historias clínicas para la estimación de la estadía esperada a partir de la función de regresión lineal múltiple y de la clasificación de pacientes por Grupos de Diagnósticos Relacionados, y otro de 302 historias clínicas para la validación de los dos métodos de ajuste por riesgo. En la fase de validación, se evaluó la capacidad de cada procedimiento para detectar ineficiencias de la atención en otro grupo de historias clínicas, por medio del análisis de varianza y la construcción de una curva ROC. Resultados: influyeron en la estadía hospitalaria, la edad, el índice de gravedad, el diagnóstico principal al egreso y sus interacciones, y el sexo. El área bajo la curva ROC con la regresión lineal múltiple fue de 0,747 (p< 0,001) (IC de 95 por ciento 0,690-0,805) y con los Grupos de Diagnósticos Relacionados, fue de 0,738 (p< 0,001) (IC de 95 por ciento 0,680-0,796). Conclusiones: ambos procedimientos de ajuste son igualmente eficaces en la detección de problemas de eficiencia, pero el modelo de regresión lineal múltiple, para estimar la estadía esperada, resulta mejor que el de los Grupos de Diagnósticos Relacionados por razones principalmente económicas. Este hecho avala su utilización en países o instituciones de recursos limitados como los propios de países no desarrollados

Introduction: the length of stay at hospital is the indicator of the rendered service efficiency par excellence, so any assessment of the hospital performance based on this indicator should take into account in one way or another the characteristics of the patients considered for the value estimation. Objective: to evaluate two risk adjustment methods for the length of stay as indicator of the hospital performance. Methods: a retrospective study was conducted at the internal medicine service of "Hermanos Ameijeiras" hospital from May to October, 2006. The sample of 606 medical histories was randomly divided into two parts, that is, one group comprised 304 medical histories for the predicted length of stay estimation from the multiple linear regression function and from the patient classification by related diagnosis groups, and the other included 302 medical histories for the validation of these two risk adjustment methods. In the validation phase, the capacity of each procedure to detect care deficiencies in another group of medical histories through the variance analysis and the ROC curve construction was evaluated. Results: age, severity index, main diagnosis on discharge and its interactions, and sex influenced the length of stay. The area under the ROC curve with the multiple linear regression was 0.747 (p< 0,001) (95 percent CI, 0.690-0.805) whereas the same are with the related diagnosis groups was 0,738 (p< 0,001) (95 percent CI, 0.680-0.796). Conclusions: both risk adjustment methods are equally effective in detecting efficiency problems, but the multiple linear regression model is better than the related diagnosis groups in estimating the predicted length of stay due to economic reasons. This aspect supports its use in poor-resource countries or institutions as is the case of underdeveloped countries

El ajuste por riesgo en la evaluación del desempeño hospitalario / Risk-adjustment in the assessment of hospital performance

Los indicadores de resultados constituyen parte esencial de la evaluación de la calidad de la atención hospitalaria. Son también atractivos pues permiten estimar el beneficio que representa el hospital para la comunidad, pero no son útiles para comparaciones en el espacio y el tiempo si no se ajustan por las características de los pacientes que fueron incluidos en el cálculo de los indicadores. La primera noción de esta necesidad proviene del siglo XIX y ya a mediados del siglo XX el ajuste por riesgo era una realidad en la comparación de desempeño hospitalario de países desarrollados. En Cuba aún no se realizan comparaciones de resultados en tiempo y espacio, dentro y entre hospitales o servicios hospitalarios, ajustadas por riesgo. Con el presente trabajo se pretende introducir el tema a los interesados y también abrir el debate en torno a la mejor forma de comenzar a realizar el ajuste por riesgo, imprescindible en las evaluaciones del desempeño hospitalario.

Outcome indicators are an essential part of the hospital care quality assessment. They are also attractive elements that allow estimating the benefits that hospital brings to the community, but they are not useful in spatial and time comparisons if they are not adjusted to the characteristics of those patients included in the indicator calculations. The first notion of this requirement dated back to the 19th century, and at the middle of the 20th century, the risk-adjustment had already been included in the comparison of hospital performances in the developed countries. However, risk-adjusted spatial and time comparisons of outcomes inside the hospital or between hospitals or hospital services are not made in Cuba yet. The present paper attempted to submit this topic to the interested people and to pave the way for debate around the best form of introducing the risk-adjustment since it is essential for hospital performance assessments.