Confiabilidade da autoavaliação das práticas de segurança do paciente instituídas pelo Sistema Nacional de Vigilância Sanitária: um estudo piloto / Reliability of patient safety self-assessment practices established by the National Health Surveillance System: a pilot study

RESUMO

Resumo Introdução: A Autoavaliação das Práticas de Segurança do Paciente é um ato regulatório para melhoria da qualidade do cuidado. Porém, há dúvidas sobre a validade das suas informações. O objetivo deste estudo foi analisar a sua confiabilidade. Método: Estudo piloto de análise da confiabilidade de 21 indicadores simples e um composto da autoavaliação como forma de embasar uma amostra nacional em estudos futuros. Participaram hospitais com leitos de terapia intensiva e comparou dados da Autoavaliação (AA) e Autoavaliação Revisada (AR) pela vigilância sanitária (Visa) com a Inspeção Presencial (IP). A análise incluiu os coeficientes Kappa e de correlação intraclasse. Resultados: Comparando com a IP, a concordância foi aceitável (Kappa≥0,4) em 12 indicadores da AA e em 18 da AR. Os indicadores menos confiáveis são relativos a protocolos de prevenção de infecções. Quanto ao indicador composto do nível de adesão, a confiabilidade melhorou com revisão da Visa (AA=0,89 e AR=0,94), embora a concordância da classificação de alta conformidade tenha sido baixa. Conclusões: A AR se mostrou essencial para melhorar a confiabilidade da Autoavaliação. Ademais, identificou-se necessidade de revisar alguns indicadores e o instrumento de verificação pela Visa.

ABSTRACT

Abstract Introduction: The Patient Safety Self-Assessment Practices is a regulatory action to enhance quality of care. However, validation of its information requires attention. This study aimed to analyze reliability of the Patient Safety Self-Assessment Practices. Methods: Pilot study analyzing the reliability of 21 simple indicators and 1 composite of self-assessment to provide a national sample in future studies. Hospitals with intensive unit care beds participated in the study, and data from self-assessment (SA) and revised self-assessment (RSA) by the health surveillance (HS) were compared with on-site inspection (OSI). Analyses included Kappa and intraclass correlation coefficients. Results: Concordance was satisfactory (Kappa ≥ 0.4) in 12 indicators of SA and 18 indicators of RSA compared with OSI. The least reliable indicators were related to infection prevention protocols. Reliability of the adherence level composite indicator improved with HS revision (SA = 0.89 and RSA = 0.94), despite the low concordance of the high compliance classification. Conclusion: RSA was essential to improve reliability of SA. In addition, some indicators and assessment tools of the HS need revision.