Level of satisfaction and correlation between the performance and self-evaluation of physical therapy students in the objective structured clinical examination (OSCE) when using physical agents

ABSTRACT

Introduction: Objective structured clinical examination (OSCE) is a validated instrument that allows measuring clinical skills in health sciences students; thus, it is important to know the students' level of satisfaction with this strategy, as well as the correlation between performance and self-evaluation. Objectives: To determine the correlation between the performance and self-evaluation (perceived performance) of Chilean physical therapy students in an OSCE designed to assess their clinical skills when using physical agents, and to assess their level of satisfaction with it. Materials and methods: Cross-sectional study conducted in 111 physical therapy students who participated in an OSCE consisting of seven stations. Performance checklists were used at each station (passing score 70% of the maximum score per station) and students were administered 2 perception surveys for self-evaluation purposes and for determining their level of satisfaction with the OSCE. The Spearman Rho test was performed to determine the correlation between station scores and the students' self-evaluation (significance level of p<0.05). Results: Median scores higher than the passing score were observed in 5 stations (S1=66, IQR 52-70; S2=55, IQR 45-60; S3=60, IQR 50-69; S4=65, IQR 55-73; S7=40, IQR 33-45), except for the strengthening and parameter interpretation stations (S5=54, IQR46-65; S6=10, IQR 9-13). A positive significant correlation was found between the OSCE scores and the students' self-evaluation in five stations (S3 p =0.042; S4 p <0.0001; S5 p =0.000; S6 p =0.000; S7 p <0.0001). The students' level of satisfaction with the OSCE was high, with 89.18% of them stating they agreed with how it was organized. Conclusion: The OSCE allowed the evaluation of the participants' clinical skills when using physical agents. Also, their performance in the OSCE was consistent with their self-evaluation, which proves the usefulness of the instrument. The students' high level of satisfaction with this methodology supports its use, since they acknowledge both its contribution and the importance of using similar tools to improve their training.

RESUMEN

Introducción. La evaluación clínica objetiva estructurada (ECOE) es un instrumento validado que permite medir las habilidades clínicas de los estudiantes de ciencias de la salud, por lo que es importante conocer su nivel de satisfacción con esta estrategia, así como la correlación entre desempeño y autoevaluación. Objetivos. Determinar la correlación entre el desempeño y la autoevaluación (desempeño percibido) de estudiantes chilenos de fisioterapia en una ECOE diseñada para evaluar sus habilidades clínicas a la hora de usar agentes físicos, y evaluar su nivel de satisfacción con esta herramienta. Materiales y métodos. Estudio transversal realizado en 111 estudiantes de fisioterapia que participaron en una ECOE de 7 estaciones. Se utilizaron listas de verificación de desempeño en las estaciones (nota aprobatoria 70% de la nota máxima por estación) y 2 encuestas de percepción para la autoevaluación y determinar el nivel de satisfacción de los estudiantes con la ECOE. Se realizó la prueba de Rho de Spearman para determinar la correlación entre los puntajes por estación y la autoevaluación (nivel de significancia p <0.05). Resultados. Se observaron medianas de puntajes superiores al aprobatorio en 5 estaciones (E1=66, RIC 52-70; E2=55, RIC 45-60; E3=60, RIC 50-69; E4=65, RIC 55-73; E7=40, RIC 33-45), pero no en las estaciones de fortalecimiento e interpretación de parámetros (E5=54, RIC 46-65; E6=10, RIC 9-13). Se observó una correlación positiva y significativa entre los puntajes de la ECOE y la autoevaluación en cinco estaciones (E3 p =0.042; E4 p <0.0001; E5 p=0.000; E6 p =0.000; E7 p <0.0001). El nivel de satisfacción con la ECOE fue alto, con un 89.18% de aprobación respecto a cómo fue organizada. Conclusión. La ECOE permitió evaluar las habilidades clínicas de los participantes al usar agentes físicos, siendo sus puntajes consistentes con la autoevaluación, lo que demuestra la utilidad del instrumento. El alto nivel de satisfacción con esta metodología da soporte a su uso, ya que los estudiantes reconocen su aporte y la importancia de usar herramientas similares para mejorar su formación.