Autoevaluación de adquisición de competencias en estudiantes de grado de Medicina mediante simulación clínica / Self-assessment of skill acquisition in clinical simulations for medical undergraduate students

Introducción: La autopercepción que tienen los estudiantes para desarrollar su práctica clínica es la manera más acertada de evaluar cuán preparados se sienten y cuáles son sus habilidades. La universidad desarrolla un programa de simulación que permite a los alumnos potenciar su propio aprendizaje, con situaciones de feedback de los instructores de simulación.Sujetos y métodos.El estudio tuvo lugar en el curso académico 2019-2020. Los estudiantes de tercer año completaron tres escenarios de simulación; los de cuarto año, cuatro; y los de quinto año, tres. Antes y después de cada sesión de simulación, completaron un cuestionario electrónico de autopercepción de competencias técnicas y no técnicas.Resultados.De los 121 estudiantes de tercer curso, 79 (65,3%) contestaron a la encuesta inicial y 68 (61,2%) a la encuesta final. En cuarto curso participaron 111 alumnos, y contestaron la encuesta inicial 63 alumnos (56,8%) y 68 la final (61,2%). El quinto curso estuvo compuesto por 97 estudiantes, de los cuales 94 (96,9%) contestaron la encuesta inicial y 69 (71,1%) la final. Todos los ítems de la encuesta de autopercepción mejoraron de forma estadísticamente significativa (p < 0,001) en la encuesta final. Las puntuaciones iniciales medias en la dimensión no técnica fueron más altas que las puntuaciones medias en la dimensión técnica para todos los cursos de estudio.Conclusiones.Los resultados que obtuvimos mostraron una mejora en la autopercepción de las habilidades de los estudiantes y en su confianza para realizar las tareas de las simulaciones. Los alumnos de cursos superiores se sienten más seguros tanto en habilidades técnicas como en no técnicas, como la comunicación. (AU)

Introduction: The self-perception that students have to develop their clinical practice is the most accurate way to assess how prepared they feel and what their abilities are. The University develops an innovative and complete simulation program that allows students to enhance their own learning and that of their classmates, with feedback situations from the simulation instructors of the faculty itself.Subjects and methods.The study took place in the academic year 2019-2020. During the study period, 3rd-year students completed 3 simulation scenarios, 4th-year students 4 cases, and 5th-year students completed 3 scenarios. Before and after each simulation session, they anonymously and voluntarily completed an electronic questionnaire on self-perception of technical and non-technical skills.Results.Of the 121 third-year students, 79 (65.3%) answered the initial questionnaire and 68 (61.2%) the final questionnaire. In the fourth year, 111 students participated, and 63 students (56.8%) answered the initial questionnaire and 68 (61.2%) the final one. The fifth course was composed of 97 students, of which 94 (96.9%) answered the initial questionnaire and 69 (71.1%) the final one. All the items of the self-perception survey improved in a statistically significant way (p < 0.001) in the final survey. The mean baseline scores on the non-technical dimension were higher than the mean scores on the technical dimension for all study courses.Conclusions.The results we obtained showed an improvement in the self-perception of the students' abilities and in their confidence to perform the tasks of the simulations. Higher grade students feel more confident in both technical and non-technical skills, such as communication. (AU)

La telesimulación como método de enseñanza clínica en estudiantes de grado de la asignatura "Cirugía". Evaluación cualitativa de una experiencia piloto / Telesimulation as a method of clinical teaching in undergraduate students of surgery. A qualitative evaluation of a pilot experience

RESUMEN Antecedentes: la actual pandemia causada por COVID-19 plantea desafíos a la enseñanza clínica al afectar el desarrollo normal de las actividades presenciales. Se necesitan soluciones que ayuden a mitigar esos efectos. Objetivo: el propósito de este estudio es presentar una estrategia de telesimulacion (TS) y analizar la perspectiva del diseño instruccional desde los estudiantes de grado de Cirugía. Material y métodos: 26 estudiantes tuvieron una inmersión en escenarios de alta fidelidad a distancia, a través de una plataforma de videoconferencia que les permitió experimentar y analizar situaciones críticas y tomar decisiones terapéuticas. El análisis de los datos se realizó desde un abordaje cuantitativo-cualitativo poniendo el foco en las vivencias de los participantes a partir de la encuesta de satisfacción, las transcripciones del debriefing (etapa reflexiva) y una pregunta abierta sobre percepción de aprendizaje, con el propósito de analizar la actividad en torno a las oportunidades de aprendizaje de razonamiento clínico y habilidades no técnicas como también los atributos del método percibidos por los estudiantes. Resultados: todos recomendarían la actividad a otro. Durante la etapa de debriefing emergen aspectos del rendimiento en relación con la hipótesis diagnóstica, la investigación complementaria, el tratamiento y las habilidades no técnicas. Además existió una percepción de aprendizaje más allá de la que ofrece la lectura de contenidos. Conclusión: la TS como oportunidad de aprendizaje favorece la enseñanza clínica. Como técnica, si bien puede lograr alta fidelidad, no puede descuidar los aspectos técnicos y tecnológicos que alterarían su curso.

ABSTRACT Background: The current COVID-19 pandemic poses additional challenges to clinical teaching by affecting the normal development of onsite activities. Solutions are necessary to mitigate these effects. Objective: The aim of this study is to present a telesimulation (TS strategy) and analyze the instructional design perspective of undergraduate students of surgery. Material and methods: Twenty-six students participated in the experience, immersed in high-fidelity virtual scenarios through a video conference platform in which they could experience and analyze critical situations and decide a therapeutic plan. Data analysis was carried out using a quantitative-qualitative approach, focusing on the participants' experiences reported in a satisfaction survey, debriefing transcriptions (reflective stage) and an open-ended question about the perception of learning aimed at analyzing the activity in terms of the opportunities to learn clinical reasoning, non-technical skills and the attributes of the method as perceived by the students. Results: All the students would recommend the activity to another peer. During debriefing, the aspects of performance related with the diagnostic hypothesis, complementary investigation, treatment and non-technical skills emerge. Furthermore, there was a perception of learning beyond that offered by content reading. Conclusion : Telesimulation as a learning opportunity favors clinical teaching. Although TS can achieve high fidelity as a technique, it cannot neglect the technical and technological aspects that would alter its course.

Un modelo para la evaluación de las habilidades no técnicas en anestesiología: una revisión de la literatura / A model for the assessment of non-technical skills in anesthesiology: a literature review

Resumen: Hasta 80% de los errores médicos se deben a fallas en factores humanos (mala comunicación, monitoreo inadecuado, fallas de verificación, etc.), por lo que el entrenamiento de los anestesiólogos exige el desarrollo de habilidades no técnicas en anestesiología. Las habilidades no técnicas son las habilidades cognitivas, sociales y personales que complementan las habilidades técnicas, y que contribuyen al desempeño seguro y eficiente de la tarea. En 2004 la Universidad de Aberdeen fue la primera en plantear un modelo para la definición y evaluación de estas habilidades en el ámbito médico. El modelo práctico consta de 15 elementos incluidos en cuatro categorías: manejo de la tarea, trabajo en equipo, conciencia de la situación y toma de decisiones. La herramienta es utilizada por anestesiólogos graduados para evaluar a quienes están en entrenamiento en el quirófano o mediante simulación clínica. La validez de este sistema, así como su importancia en la seguridad del paciente, ha sido demostrada por diferentes estudios.

Abstract: Close to 80% of medical errors are due to human factors (poor communication, inadequate monitoring, failure to check, etc.), which is why training for anaesthetists requires developing essential soft skills for Anaesthesiology. Soft skills are defined as specific cognitive, socio-emotional and interpersonal abilities complementing core skills which contribute to the safe and efficient carrying out of a job-specific task. In 2004, the University of Aberdeen established a first model for defining and evaluating these soft skills. The model consists of 15 elements across four categories: task management, team working, situational awareness and decision-making. The model is a tool employed by postgraduate anaesthesiologists to assess trainees in the operating theatre or through clinical simulation. The validity of this system, as well as its importance for patient safety have been demonstrated in a range of studies.

¿Cómo entrenar una habilidad compleja en cirugía?: Evaluación cualitativa de una estrategia basada en simulación / How to train a complex skill in surgery: Qualitative evaluation of a simulation-based strategy

RESUMEN Antecedentes: el aprendizaje de tareas complejas en cirugía requiere la coordinación e integración de habilidades técnicas y no técnicas que impactan en el rendimiento de los equipos de trabajo. Objetivo: presentar la evaluación de una estrategia educativa basada en simulación para el entrena miento de una habilidad compleja en cirugía, desde la perspectiva de los participantes. Material y métodos: en 2019 se desarrolló un curso de 20 horas (6 horas virtuales y 14 presenciales). Participaron 10 profesionales de la salud. Como estrategia se diseñó la integración de actividades de resolución de casos, role playing, práctica con simuladores sintéticos y virtuales y simulación de alta fidelidad. Al finalizar se realizó un cuestionario sobre percepción de aprendizaje y cambios actitudi nales. Resultados: el 50% tuvo percepción de mejora de sus habilidades y conocimientos al finalizar el cur so. Sin embargo, cuando se preguntó por el impacto del curso sobre su actividad profesional, el 80% respondió niveles superiores al aprendizaje percibido. El 100% se refirió a la necesidad de mejorar habilidades no técnicas. Todos calificaron la experiencia como positiva o muy positiva, y con ganas de repetirla. Conclusión: la perspectiva de quienes participaron de este programa formativo da cuenta de la alta aceptación del método. El hacer conscientes las habilidades no técnicas durante la etapa de reflexión sugiere cambios no solo actitudinales sino sobre la autopercepción de eficacia. Creemos que la meto dología de entrenamiento de equipos basado en simulación tiene potencialidad de mejorar el rendi miento global y futuros estudios deberían estar orientados a ello.

ABSTRACT Background: Learning complex tasks in surgical requires the coordination and integration of technical and non-technical skills have an impact on the performance of work teams. Objective: The aim of this study is to report the results of a simulation-based educational strategy for training in complex surgical skills considering the participants' perceptions. Material and methods: In 2019, 10 healthcare professionals participated in a 20-hour course divided in 6 hours of online training and 14 hours of onsite training. The strategy designed included the inte gration of case resolution activities, role-playing, practice with synthetic and virtual simulators and high-fidelity simulation. At the end of the course, a questionnaire was administered to explore partici pants' perceptions on what they had learned and on their attitude changes. Results: Fifty percent of the participants perceived their skills and knowledge improved at the end of the course compared with their perception at the beginning of the course while 80% perceived the impact of the course on their professional activity was good or excellent. All the participants agreed with the need for improving non-technical skills. The experience was rated as positive or very positive by all participants, who were eager to repeat it. Conclusion: The participants' perceptions of this educational program demonstrates that this method is highly accepted. Raising awareness of non-technical skills during the reflection stage suggests the need for changes in attitude and in self-perception of efficacy. We believe that simulation-based tra ining offers the possibility of improving the overall performance of the surgical team. Future studies should focus on this goal.

Urology simulation boot camp: A perspective from non-UK delegates. / Boot camp de simulación en urología: perspectiva de los delegados no británicos.

BACKGROUND: Medical simulation has become an integral part of modern-day surgical training. Despite its benefits, it is still not widely incorporated in the curriculum of trainees. The Urology Boot Camp (USBC) is an innovative 5-day course aimed at trainees entering the UK training scheme. Since its implementation, there's been increasing interest by non-UK trainees. OBJECTIVE: To assess the experiences of non-UK trainees in the USBC, both quantitatively and qualitatively, including skills progression analysis. DESIGN, SETTING AND PARTICIPANTS: This double-group cohort retrospective study included 20 delegates from non-UK countries and 76 trainees from UK who attended the USBC in 2017 and 2018. Trainees undertook pre- and post-course MCQs, pre-course operative experience questionnaires and a 12-month post-course survey on the usefulness of the skills acquired. OUTCOME MEASUREMENTS AND STATISTICAL ANALYSIS: Differences in mean MCQ scores between UK and non-UK delegates at baseline and after the course were assessed by the independent T-test. Each core urology procedural skill was evaluated by an expert and graded according to a Likert scale (1-5). The Kruskal-Wallis test was used to assess the differences in the scores between both groups on endourological techniques. A Likert scale (1-5) was used to grade the participants' answers to the post-course 12-month survey. RESULTS AND LIMITATIONS: Trainees from UK scored significantly higher in the pre-course MCQ assessment, however after completion of the boot camp, no significant difference was noted. There were no differences between the groups at e-BLUS completion times, and both groups significantly improved their results. A 12-month post-course survey on the utility of training during the boot camp and qualitative evaluation of the course by overseas delegates was very positive. CONCLUSIONS: The USBC is a valuable learning experience that leads to improvement of technical and soft skills of UK and non-UK trainees alike.

Evaluación de las habilidades no técnicas en cirugía / Assessment of non-technical skills in surgery

Resumen Tradicionalmente, se ha asociado a la falta de habilidades y competencias técnicas con los eventos adversos en el área quirúrgica. Sin embargo, se ha visto que un gran porcentaje de estos eventos se relacionan directamente con déficits en las habilidades no técnicas (HNT) del equipo quirúrgico. Por lo tanto, la evaluación de éstas se ha vuelto un tópico relevante para minimizar errores y fortalecer el desempeño en el escenario operatorio. Múltiples instrumentos han sido desarrollados con este fin, tanto para analizar el funcionamiento del equipo completo, como de cada subgrupo que lo conforma. El presente trabajo pretende resumir los principales aspectos de los distintos métodos que han sido desarrollados en los últimos años para la evaluación de HNT en el área quirúrgica.

Traditionally, the lack of skills and technical competencies has been associated with adverse events in the surgical area. However, it has been seen that a large percentage of these events are directly related to deficits in the non-technical skills (NTS) of the surgical team. Therefore, the evaluation of these has become a relevant topic to minimize errors and strengthen performance in the operating room. Multiple instruments have been developed for this purpose, both to analyze the operation of the complete equipment, and of each subgroup that comprises it. This article aims to summarize the key aspects of the methods that have been developed in recent years for the evaluation of NTS in the surgical area.

Non-technical skills assessment scale in nursing: construction, development and validation / Escala de avaliação de habilidades não técnicas em enfermagem: construção, desenvolvimento e validação / Escala de evaluación de habilidades no técnicas en enfermería: construcción, desarrollo y validación

ABSTRACT The introduction of non-technical skills during nursing education is crucial to prepare nurses for the clinical context and increase patient safety. We found no instrument developed for this purpose. Objectives: to construct, develop and validate a non-technical skills assessment scale in nursing. Method: methodological research. Based on the literature review and experience of researchers on non-technical skills in healthcare and the knowledge of the principles of crisis resource management, a list of 63 items with a five-point Likert scale was constructed. The scale was applied to 177 nursing undergraduate students. Descriptive statistics, correlations, internal consistency analysis and exploratory factor analysis were performed to evaluate the psychometric properties of the scale. Results: scale items presented similar values for mean and median. The maximum and the minimum values presented a good distribution amongst all response options. Most items presented a significant and positive relationship. Cronbach alpha presented a good value (0.94), and most correlations were significant and positive. Exploratory factor analysis using the Kaiser-Meyer-Olkin test showed a value of 0.849, and the Bartlett's test showed adequate sphericity values (χ2=6483.998; p=0.000). One-factor model explained 26% of the total variance. Conclusion: non-technical skills training and its measurement could be included in undergraduate or postgraduate courses in healthcare professions, or even be used to ascertain needs and improvements in healthcare contexts.

RESUMO A introdução de habilidades não técnicas durante o ensino de enfermagem é fundamental para preparar os enfermeiros para o contexto clínico e aumentar a segurança do paciente. Não foram encontrados quaisquer instrumentos desenvolvidos para essa finalidade. Objetivos: construir, desenvolver e validar uma escala de avaliação de habilidades não técnicas em enfermagem. Método: pesquisa metodológica. Com base na revisão da literatura e na experiência dos pesquisadores em habilidades não técnicas em saúde, e no conhecimento dos princípios do gerenciamento de recursos em crises, foi construída uma lista de 63 itens e com uma escala Likert de cinco pontos. A escala foi aplicada em 177 estudantes de graduação em enfermagem. Estatística descritiva, correlações, análises de consistência interna e análise fatorial exploratória foram realizadas para avaliar as propriedades psicométricas da escala. Resultados: os itens da escala apresentaram valores semelhantes para média e mediana. Os valores máximo e mínimo mostraram uma boa distribuição em todas as opções de resposta. A maioria dos itens apresentou uma relação significativa e positiva. O alfa de Cronbach apresentou um bom valor (0,94) e a maioria das correlações foi significativa e positiva. A análise fatorial exploratória através do teste de Kaiser-Meyer-Olkin apresentou um valor de 0,849, e o teste de Bartlett apresentou valores de esfericidade adequados (χ2=6483.998; p=0.000). O modelo de um fator explicou 26% da variância total. Conclusão: a formação em habilidades não técnicas e sua mensuração poderiam ser incluídos nos programas de graduação ou pós-graduação de profissões da saúde, ou até mesmo serem utilizadas para avaliar as necessidades e melhorias nos contextos de cuidados de saúde.

RESUMEN La introducción de habilidades no técnicas durante la educación de enfermería es fundamental para preparar a los enfermeros para el contexto clínico y aumentar la seguridad del paciente. No se encontraron instrumentos desarrollados para este propósito. Objetivos: construir, desarrollar y validar una escala de evaluación de habilidades no técnicas en enfermería. Método: investigación metodológica. Con base en la revisión de la literatura y la experiencia de los investigadores en habilidades no técnicas en el cuidado de la salud y el conocimiento de los principios del manejo de recursos en crisis, se construyó una lista de 63 ítems y con una escala Likert de cinco puntos. Se aplicó la escala a 177 estudiantes de pregrado en enfermería. Se realizaron estadísticas descriptivas, correlaciones, análisis de consistencia interna y análisis factorial exploratorio para evaluar las propiedades psicométricas de la escala. Resultados: los ítems de la escala presentaron valores similares para la media y la mediana. Los valores máximo y mínimo mostraron una buena distribución en todas las opciones de respuesta. La mayoría de los ítems presentaron una relación significativa y positiva. El alfa de Cronbach presentó un buen valor (0,94), y la mayoría de las correlaciones fueron significativas y positivas. El análisis factorial exploratorio mediante la prueba Kaiser-Meyer-Olkin mostró un valor de 0,849, y la prueba de Bartlett mostró valores de esfericidad adecuados (χ2=6483.998; p=0,000). El modelo de un factor explicó el 26% de la varianza total. Conclusión: la capacitación en habilidades no técnicas y su medición podrían incluirse en programas de grado y posgrado en profesiones de la salud, o incluso utilizarse para evaluar las necesidades y mejoras en los contextos de atención médica.