ABSTRACT
RESUMO Introdução: O ensino baseado em competências no âmbito das residências médicas tornou evidente o descompasso dos processos de avaliação tradicionais com os objetivos educacionais dos projetos pedagógicos alinhados às matrizes de competências de cada especialidade. A matriz de competência para o Programa de Residência em Medicina Intensiva (acesso direto em três anos) foi aprovada em 2021. O objetivo deste artigo é descrever o relato de experiência de um projeto de intervenção nos instrumentos de avaliação de desempenho dos residentes no Programa em Residência em Medicina Intensiva de um hospital público universitário em São Luís, no Maranhão. Relato de experiência: Após a organização do grupo de estudo e de trabalho para a intervenção, houve a escolha do objeto "ferramentas de avaliação de competências" e a seleção do Programa de Residência de Medicina Intensiva. Inicialmente, foi aplicado um questionário a todos os médicos preceptores e residentes, com atuação no cenário da unidade de terapia intensiva (UTI), com o objetivo de aferir as percepções deles acerca do instrumento avaliativo vigente, seguindo a pergunta norteadora: "A avaliação atual atende à concepção do programa traduzido pela matriz de competência da Comissão Nacional de Residência Médica?". Discussão: Embora a maioria dos preceptores e residentes tenha considerado que os métodos de avaliação atendiam à concepção do programa, havia pontos frágeis em relação ao feedback e à avaliação de desempenho dos residentes. Como intervenção, propusemos adaptação da ferramenta existente, adequando-a aos desempenhos previstos na matriz de competências da especialidade com formalização do feedback e introdução de avaliação de desempenho em cenário real utilizando o Miniexercício Clínico Avaliativo (Mini-Cex). Conclusão: Os limites entre a avaliação e a aprendizagem são tênues. Com base em indicadores sobre a percepção de preceptores e residentes de fragilidades na avaliação utilizada de longa data, foi proposta uma intervenção de modificação dos instrumentos avaliativos com o intuito de adequar/melhorar a avaliação de competências.
ABSTRACT Introduction: Competency-based teaching in medical residencies has evidenced the mismatch between traditional assessment processes and the educational objectives of pedagogical projects aligned with the competency matrices of each specialty. The competency matrix for the Intensive Care Medicine Residency Program (3-year direct admission) was approved in 2021. The objective of this article is to describe an experience report of an intervention project in the performance assessment instruments of residents attending the Intensive Care Medicine Residency Program at a university hospital in São Luís-Maranhão. Experience Report: After organizing the study and working group for the intervention, the object "skills assessment tools" was chosen and the Intensive Care Medicine Residency Program was selected. Initially, a questionnaire was applied to all preceptors and residents working in the intensive care unit (ICU) setting with the aim of evaluating their perceptions regarding the current assessment tool, following the guiding question: does the current assessment meet the conception of the program translated by the competency matrix of the National Medical Residency Commission? Discussion: Although the majority of the preceptors and residents considered that the evaluation methods met the Program design, there were weaknesses in relation to feedback and evaluation of the residents' performance. As an intervention, we proposed adapting the existing tool, making it adequate to the performance predicted in the specialty competency matrix with formalization of feedback and introduction of performance assessment in a real scenario using the Mini Clinical Assessment Exercise (Mini-CEX). Conclusion: The boundaries between assessment and learning are blurred. Based on indicators on the perception of preceptors and residents of weaknesses in the assessment used for a long time, an intervention was proposed to modify the assessment instruments with the aim of adapting/improving the assessment of skills.
ABSTRACT
Resumo Este estudo objetivou elaborar uma escala interpretável para mensurar o nível de oferta das boas práticas no trabalho de parto e parto em maternidades da Rede Cegonha (RC) a partir da percepção dos trabalhadores. A escala foi composta por dezessete itens relacionados às boas práticas, obtidos a partir do instrumento utilizado na pesquisa "Avaliação da atenção ao parto e nascimento em maternidades da RC". O modelo logístico de três parâmetros da Teoria de Resposta ao Item foi utilizado para criação da escala e análise dos itens. A escala foi composta por três níveis âncoras. No primeiro nível âncora, tem-se maternidades que ofertavam adequadamente estratégias para o acolhimento e estimulando a gestante a deambular no trabalho de parto. As maternidades do segundo nível incluíram também a oferta adequada do direito a acompanhante de livre escolha da mulher, massagem, bola e diferentes posições de parto. Por fim, têm-se as maternidades do terceiro nível ofereciam também adequadamente banqueta de parto, bem como os itens já citados. Os achados deste estudo mostraram a contribuição de cada item na mensuração do nível de oferta das boas práticas de atenção ao trabalho de parto e parto e a construção de uma escala interpretativa para avaliação das maternidades da RC.
Abstract This study aimed to develop an intelligible scale to measure the level of supply of best practices in labor, childbirth and delivery in maternity units in the Rede Cegonha (RC) based on the workers' perception. The scale consisted of seventeen items related to best practices, based on the instrument used in the "Evaluation of care during delivery and birth in maternity hospitals in the RC" research The three-parameter logistic model of Item Response Theory was used to create the scale and analyze the items. The scale consisted of three levels. In the first level, there are maternity hospitals that adequately offered strategies for welcoming and encouraging the pregnant woman to circulate during labor. The second level maternity wards also included the adequate offer of the right to a companion of choice, massage, ball and different birth positions. Finally, the third level maternity hospitals also offered an adequate delivery stool, as well as the items already mentioned. The findings of this study showed the contribution of each item in measuring the level of supply of best practices in care for labor, childbirth and delivery and the construction of an intelligible scale to assess RC maternity hospitals.