RESUMO
Resumo: O objetivo do estudo é analisar o perfil de egressos e identificar fatores associados ao desempenho positivo relativo à trajetória de formação e de inserção profissional entre aqueles que concluíram cursos presenciais de mestrado e doutorado acadêmico da Fundação Oswaldo Cruz (Brasil). Participaram do estudo 2.462 egressos (1.402 de mestrado e 1.060 de doutorado) que responderam um questionário digital, contendo questões sobre perfil do egresso e inserção profissional antes do ingresso no curso e após a conclusão. Foi criada uma medida sobre "desempenho positivo pós-curso". Os resultados revelam que egressos de mestrado com impacto positivo do curso tendem a ser homens; ter especialização antes de ingressar no curso; ter emprego remunerado após o término do curso nas áreas de pesquisa, educação, assistência e gestão; e ser servidor público. No doutorado o seguinte perfil é evidenciado: egressos com emprego remunerado após o término do curso nas áreas de pesquisa ou educação; contratados por Regime Jurídico Único ou contrato temporário de pessoa jurídica; e com publicação científica ou patente. A avaliação/acompanhamento de egressos deve se instaurar como uma importante política pública educacional, incorporada no processo de autoavaliação institucional, o que possibilita rever rumos e prioridades na agenda educacional e pedagógica da instituição.
Abstract: This study aims to analyze the profile of graduates and identify factors associated with positive performance regarding training and professional insertion among those who have completed face-to-face master's and doctoral courses at the Oswaldo Cruz Foundation (Brazil). A total of 2,462 graduates participated in the study (1,402 master's and 1,060 doctoral graduates), who answered a digital questionnaire containing questions about individual characteristics and professional insertion before entering the course and after completion. A measure on "positive post-course performance" was created. The results show that Master's graduates with a positive impact from the course tend to be men; to have a specialization degree before entering the course; to have paid employment after finishing the course in the areas of research, education, assistance, and management; and to be civil servants. In the Doctorate, the following profile is evident: graduates with paid employment after finishing the course in the areas of research or education; hired under a single legal regime or temporary contract as a legal entity; and with a scientific publication or patent. Evaluating/monitoring graduates must be established as an important public educational policy, incorporated into the institutional self-evaluation process, which makes it possible to review directions and priorities in the institution's educational and pedagogical agenda.
Resumen: El objetivo del estudio es analizar el perfil de egresados e identificar factores asociados al desempeño positivo relacionado a la trayectoria de formación e inserción profesional entre aquellos que concluyeron cursos presenciales de maestría y doctorado académico de la Fundación Oswaldo Cruz (Brasil). Participaron del estudio 2.462 egresados (1.402 de maestría y 1.060 de doctorado) que contestaron el cuestionario de manera digital, con preguntas sobre el perfil del egresado y la inserción profesional antes del ingreso al curso y tras su conclusión. Se creó una medida sobre "desempeño positivo tras el curso". Los resultados muestran que los egresados de la maestría con un impacto positivo del curso tienden a ser hombres; tener especialización antes de ingresar al curso; tener trabajo remunerado tras concluir el curso en las áreas de investigación, educación, asistencia y gestión; y ser funcionario público. Se evidencia el siguiente perfil en el doctorado: egresados con trabajo remunerado tras el término del curso en las áreas de investigación o educación; contratados bajo un régimen jurídico único o un contrato temporal de persona jurídica; y con publicación científica o patente. La evaluación/seguimiento de egresados se debe establecer como una importante política pública educativa, incorporada en el proceso de autoevaluación institucional, lo que permite revisar direcciones y prioridades en la agenda educativa y pedagógica de la institución.
RESUMO
Resumo Introdução: Com a evolução do ensino médico para currículos baseados em competências, fez-se necessária uma readequação dos currículos e dos métodos de avaliação, com maior enfoque sobre o cenário de prática profissional e, portanto, na utilização de ferramentas como o Mini-Clinical Evaluation Exercise (Mini-CEX). Objetivo: Este estudo teve como objetivo avaliar o uso da estratégia Mini-CEX como método de avaliação nos programas de residência médica. Método: Trata-se de uma revisão de escopo, cuja estratégia de busca realizada no PubMed resultou em 578 artigos. Após aplicar a metodologia do Instituto Joanna Briggs para inclusão e exclusão, foram selecionados 24 estudos transversais. Resultado: Selecionaram-se artigos referentes a estudos realizados entre 1995 e 2021, em diversos continentes, diferentes programas de residência, e cenários ambulatorial, internação e de emergência. O Mini-CEX mostrou-se aplicável no contexto da residência médica, pois trata-se de uma avaliação observacional direta do atendimento realizado pelo médico residente nos diversos cenários de atuação, como ambulatórios, internações e emergências. Trata-se de uma avaliação com tempo de observação variando de dez a 40 minutos e que permite a abordagem de vários aspectos do atendimento médico, como anamnese, exame físico, raciocínio clínico e aconselhamento, além de possibilitar a realização de um feedback sobre o desempenho dos residentes. Conclusão: O Mini-CEX constitui uma ferramenta de fácil aplicabilidade e promove alto grau de satisfação dos envolvidos, podendo ser utilizada de forma rotineira nos programas de residência médica.
Abstract Introduction: With the evolution of medical education towards competency-based curriculum, the need has emerged to reconfigure curriculum and assessment methods, with increased focus on the professional practice setting, thus leading to the utilization of tools such as the mini-CEX (mini-Clinical Evaluation Exam). Objective: To evaluate the use of the mini-CEX strategy as an assessment method in medical residency programs. Method: This is a scoping review, and the search performed on PubMed resulted in 578 articles. After applying the Joanna Briggs Institute methodology for inclusion and exclusion, 24 cross-sectional studies were selected. Results: The selected articles were based on studies conducted between 1995 and 2021, in various continents and in both clinical and surgical residency programs, including outpatient, inpatient, and emergency settings. The Mini-CEX was shown to be applicable in the context of medical residency, as it is an observational assessment of the care provided by the resident physician in various practice settings such as outpatient clinics, inpatient wards, and emergency departments. It involves a variable observation time ranging from 10 to 40 minutes and allows for the evaluation of various aspects of medical care, including history taking, physical examination, clinical reasoning, counseling, and provides an opportunity for providing feedback on the residents' performance. Conclusion: The mini-CEX is a tool that is easy to implement and promotes a high degree of satisfaction among stakeholders. It could be used more routinely in medical residency programs.
RESUMO
ABSTRACT Objective: To report the experience of implementing the São Paulo Nursing Courses Consortium for the Progress Test. Method: This is an experience report of the consortium's work in Progress Test preparation and application for Public Schools of Nursing in São Paulo in 2019, 2021 and 2022, with a descriptive analysis of the work process and the results obtained. Results: The consortium's activities are structured into the following stages: planning; theme review; distributing and requesting questions; professor training; question elaboration; question reception; question selection; question validation; student registration; test application; analysis and dissemination of results. A total of 57.3% of enrolled students participated. There was a predominance of questions of medium difficulty and a gradual progression in the level of discrimination of the questions, with, in 2022, 82.5% being considered adequate. Final considerations: The consortium has allowed the test to be applied interinstitutionally, with greater scope, accuracy, and quality of questions. Through this experience, it is expected to encourage progress testing in undergraduate nursing courses in other contexts.
RESUMEN Objetivo: Relatar la experiencia de implementación del Consorcio de Cursos de Enfermería de São Paulo para la Prueba de Progreso. Método: Se trata de un relato de experiencia del trabajo del consorcio en la elaboración y aplicación de la Prueba de Progreso para las Escuelas Públicas de Enfermería de São Paulo en los años 2019, 2021 y 2022, con un análisis descriptivo del proceso de trabajo y de los resultados obtenidos. Resultados: Las actividades del consorcio se estructuran en las siguientes etapas: planificación; revisión de temas; distribución y solicitud de preguntas; capacitación de docentes; elaboración de preguntas; recepción de preguntas; selección de preguntas; validación de preguntas; registro de estudiantes; aplicación de la prueba; análisis y difusión de resultados. Participaron el 57,3% de los estudiantes matriculados. Hubo un predominio de preguntas de dificultad media y una progresión gradual en el nivel de discriminación de las preguntas, considerándose adecuadas en 2022 un 82,5%. Consideraciones finales: El consorcio ha permitido que la prueba sea aplicada de manera interinstitucional, con mayor alcance, precisión y calidad de preguntas. A través de esta experiencia, se espera fomentar la realización de la prueba de progreso en cursos de pregrado en enfermería en otros contextos.
RESUMO Objetivo: Relatar a experiência da implementação do Consórcio dos Cursos de Enfermagem Paulistas para o Teste de Progresso. Método: Trata-se de relato de experiência da atuação do consórcio na elaboração e aplicação do Teste de Progresso para as Escolas de Enfermagem Públicas Paulistas nos anos de 2019, 2021 e 2022, com análise descritiva do processo de trabalho e dos resultados obtidos. Resultados: As atividades do consórcio estão estruturadas nas seguintes etapas: planejamento; revisão de temas; distribuição e solicitação de questões; capacitação de docentes; elaboração de questões; recepção de questões; seleção de questões; validação de questões; inscrição de estudantes; aplicação do teste; análise e divulgação de resultados. Participaram 57,3% dos estudantes matriculados. Houve predomínio de questões de média dificuldade e progressão gradual do nível de discriminação das questões, sendo que, em 2022, 82,5% foram consideradas adequadas. Considerações finais: O consórcio tem permitido a aplicação do teste de forma interinstitucional, com maior abrangência, acurácia e qualidade das questões. Por meio dessa experiência, espera-se fomentar a realização do teste de progresso em cursos de graduação em enfermagem em outros contextos.
Assuntos
Humanos , Instituições Acadêmicas , Educação em Enfermagem , Avaliação Educacional , Prática do Docente de Enfermagem , Desempenho AcadêmicoRESUMO
RESUMO Introdução: Embora na literatura médica existam diversas métricas para avaliar a qualidade dos programas de residência, os instrumentos avaliativos tendem a focar as dimensões dos residentes e preceptores. Isso negligencia uma ampla gama de partes interessadas (stakeholders), cujas perspectivas são fundamentais para uma compreensão holística da qualidade dos programas. Objetivo: Diante desse contexto, esta revisão teve como objetivos mapear os principais stakeholders envolvidos na residência médica, identificar e categorizar as métricas de avaliação da qualidade dos programas mais prevalentes na literatura, e analisar a sua relevância em relação às perspectivas das partes interessadas. Método: Inicialmente, foi realizada uma revisão de escopo da literatura para identificar e categorizar os stakeholders, além de mapear as métricas de qualidade. Posteriormente, um painel Delphi foi conduzido para analisar a relevância dessas métricas em relação às perspectivas das partes interessadas identificadas. Resultado: Foram mapeados 14 stakeholders e identificadas 17 métricas, posteriormente divididas em quatro categorias principais. As métricas "adaptabilidade" e "bem-estar" se destacaram, sendo unanimemente reconhecidas por todos os stakeholders como "favorável" ou "altamente favorável". Por sua vez, "autoavaliação" e "satisfação do paciente" receberam avaliações mais cautelosas ou negativas. Os painelistas enfatizaram que "nenhuma métrica é capaz de fornecer individualmente uma avaliação precisa da qualidade de um programa de residência médica". Conclusão: Ao mapear os stakeholders da residência médica, bem como identificar, categorizar e analisar as métricas de avaliação da qualidade mais prevalentes, este estudo ampliou o debate sobre a complexidade das perspectivas em torno da formação médica. A diversidade de atores envolvidos justifica valorizações distintas das várias dimensões da qualidade, reforçando a conclusão de que métricas isoladas não capturam integralmente a qualidade dos programas. Na prática, os resultados sublinham a importância da implementação de sistemas de avaliação da qualidade que sejam equilibrados e alinhados com as expectativas e necessidades dos principais stakeholders.
ABSTRACT Introduction: Medical literature abounds with metrics to assess the quality of residency programs, yet evaluative tools predominantly focus on the dimensions relevant to residents and preceptors. This overlooks a wide range of stakeholders, whose perspectives are essential for a holistic understanding of program quality. Given this context, this review aimed to map key stakeholders in medical residency, identify and categorize the most prevalent quality assessment metrics found in the literature, and analyze their relevance in relation to the stakeholders' perspectives. Method: Initially, a scoping review of the literature was conducted to identify and categorize stakeholders, as well as to map quality metrics. This was followed by a Delphi panel to assess the relevance of these metrics in relation to the perspectives of the identified stakeholders. Results: Fourteen stakeholders were mapped, and seventeen metrics were identified, subsequently divided into four main categories. The metrics "Adaptability" and "Well-being" stood out, being unanimously recognized by all stakeholders as "Favorable" or "Highly Favorable". Conversely, "Self-assessment" and "Patient Satisfaction" elicited more cautious or negative evaluations. Panelists emphasized that "no single metric can provide an accurate assessment of the quality of a medical residency program on its own". Conclusion: By mapping the stakeholders of medical residency, as well as identifying, categorizing, and analyzing the most prevalent quality assessment metrics, this study broadened the debate on the complexity of perspectives surrounding medical education. The diversity of actors observed justifies distinct evaluations across the various dimensions of quality, reinforcing the conclusion that isolated metrics cannot fully capture the program quality. In practice, the findings underscore the importance of implementing quality assessment frameworks that are balanced and aligned with the expectations and needs of the main stakeholders.
RESUMO
RESUMO Introdução: O curso de Medicina do Centro Universitário de Votuporanga (Unifev), aprovado em 2012, teve a primeira turma graduada em 2018. O Projeto Político Pedagógico do Curso (PPC), baseado nas Diretrizes Curriculares Nacionais (DCN), utiliza de metodologias ativas, entre elas a aprendizagem baseada em problemas. Objetivo: Este estudo teve como objetivo analisar o perfil profissional, a trajetória e a adaptação ao mercado de trabalho do médico formado pelo Unifev, além das fragilidades e fortalezas da matriz pedagógica, a partir das percepções dos egressos. Método: Trata-se de um estudo transversal, descritivo e qualiquantitativo do qual participaram 114 egressos. O estudo foi aprovado pelo Comitê de Ética em Pesquisa do Unifev. Aplicou-se, via Google Forms, um questionário semiestruturado sobre dados pessoais, informações profissionais e acadêmicas, opiniões referentes à formação dos egressos e o PPC. Resultado: Responderam 80 (70,2%) egressos distribuídos no estado de São Paulo, com maior representação feminina (71,2%). No primeiro ano após a formatura, 41,5% atuavam na urgência/emergência e 18,4% na atenção primária, com 282 postos de trabalho ocupados (2,6 ± 1,2 postos por pessoa). Sessenta e sete (83,3%) egressos obtiveram financiamento estudantil, sem relação com a faixa salarial mensal atual (dez ou mais salários mínimos para 55,5%). Poucos (n = 27; 33,8%) estavam inseridos em programa de residência; muitos ainda pretendem cursá-lo. Grande parte (72,5%) realizou curso preparatório para residência. A integração das áreas, a capacidade para o trabalho em equipe, o conhecimento das DCN e do PPC, e a ocorrência de momentos de tensão emocional/estresse foram referidos pela maioria dos respondentes (de 88,0% a 100%). Conclusão: Houve expressiva taxa de respostas com contribuições para um currículo mais próximo das necessidades dos alunos, ênfase na aprendizagem de temas das urgências e da pediatria, e no necessário cuidado com a saúde mental dos estudantes. O curso foi bem avaliado pelos respondentes, e o financiamento estudantil provou ser uma importante política, com resultados consideráveis para a jovem instituição. O estudo representa o primeiro passo para a criação de um elo mais robusto entre a instituição e seus egressos, auxiliando na concepção da cultura de acompanhamento frequente de suas trajetórias e repercutindo na avaliação do programa curricular, na medida em que oferece aos gestores do curso um diagnóstico para manter os acertos e alertar sobre possíveis ajustes.
ABSTRACT Introduction: The course at Centro Universitario de Votuporanga (UNIFEV) was approved in 2012 with the first class graduating in 2018. The Course's Pedagogical Project (PPC, Projeto Pedagógico do Curso), based on the National Curriculum Guidelines (DCN, Diretrizes Curriculares Nacionais), uses active methodologies, and among them, problem-based learning. Objective: To analyze the professional profile, career trajectory, and adaptation to the job market of a doctor graduated from UNIFEV, the strengths and weaknesses of the PPC, based on the perceptions of the alumni. Material and Method: The cross-sectional, descriptive and quanti-qualitative study, approved by the Research Ethics Committee, involved a population of graduates (n=114). A semi-structured questionnaire was applied, to provide personal, professional, and academic information. Results: Eighty graduates, distributed in the state of São Paulo with greater female representation (71.2%), answered (70.2%) the questions. In the first year after graduation, 41.5% worked in Urgency/Emergency Care and 18.4% in Primary Care, considering 282 positions (2.6±1.2 positions per person). Sixty-seven (83.3%) graduates obtained student loans, unrelated to the current monthly salary range (10 or more minimum wages for 55.5%). Few alumni were enrolled in a residency program (n=27; 33.8%); many still intend to do it. Most of them (72.5%) attended a preparatory course for residency. The integration of areas, the ability to work as a team, the knowledge about the DCN and PPC and the occurrence of moments of emotional tension/stress were mentioned by most of the interviewees (88.0 to 100%). Conclusion: There was a significant rate of responses with contributions to a curriculum closer to the students' needs, with emphasis on learning emergency and pediatric topics and on the necessary care for the students' mental health. The course was highly rated by the respondents and student loans showed to be an important policy, considerable results for the young institution. The study represents the first step towards creating a stronger link between the institution and its graduates, helping to design the institutional culture of frequent monitoring of their trajectories and impacting the evaluation of the curriculum, insofar as it offers, to the course managers, a diagnosis to maintain the successes while being alert to possible adjustments.
RESUMO
Resumen El objetivo del estudio fue describir el uso de rúbricas para la evaluación formativa de la participación de profesionales en formación en el desarrollo de ateneos. Se realizó un estudio observacional, descriptivo, transversal y retrospectivo sobre la rúbrica de ateneos de programas de formación de posgrado de Bioquímica Clínica y se analizó la confiabilidad (por medio del coeficiente alfa de Cronbach) y su impacto educativo. Se analizaron 51 rúbricas sobre 41 ateneos de 9 profesionales en formación (residentes y becarios) por 19 evaluadores. La estimación de confiabilidad arrojó un alfa de Cronbach de 0,71 (nivel de confianza del 95%, p≤0,05). La rúbrica aquí analizada ha servido para clarificar las metas de aprendizajes de una actividad tradicional en la formación de posgrado en servicio. Se ha logrado generar un instrumento de evaluación confiable que puede ser utilizado en otras profesiones y especialidades del equipo de salud.
Abstract The objective of the study was to describe the use of rubrics for the formative evaluation of the participation of professionals in training in the development of conferences. An observational, descriptive, cross-sectional and retrospective study was carried out on the rubric of athenaeums of postgraduate training programmes in Clinical Biochemistry, analysing its reliability (by means of Cronbach's alpha coefficient) and its educational impact. Fifty-one rubrics difewere analysed on 41 athenaeums of 9 professionals in training (residents and fellows) by 19 evaluators. The reliability estimate yielded a Cronbach's alpha of 0.71 (95% confidence level, p≤0.05). The rubric analysed here has served to clarify the learning goals of a traditional activity in postgraduate training in service. It has been possible to generate a reliable evaluation instrument that can be used in other professions and specialties of the health team.
Resumo O objetivo do estudo foi descrever a utilização de rubricas para avaliação formativa da participação de profissionais em formação no desenvolvimento de ateneus. Foi realizado um estudo observacional, descritivo, transversal e retrospectivo da rubrica de ateneus dos programas de formação pós-graduação em Bioquímica Clínica, analisando a sua fiabilidade (através do coeficiente alpha de Cronbach) e o seu impacto educacional. Cinquenta e uma rubricas de 41 ateneus de 9 profissionais em formação (residentes e bolsistas) foram analisadas por 19 avaliadores. A estimativa de confiabilidade resultou em um alfa de Cronbach de 0,71 (nível de confiança de 95%, p≤0,05). A rubrica aqui analisada serviu para esclarecer os objetivos de aprendizagens de uma atividade tradicional na formação pós-graduação em serviço. Foi possível gerar um instrumento de avaliação confiável que pode ser utilizado em outras profissões e especialidades da equipe de saúde.
RESUMO
Os estudantes de Medicina têm contato com diferentes áreas e cenários durante o internato e devem ter seu desempenho avaliado em cada um deles. Contudo, muitos estudantes não se sentem devidamente avaliados e, diante disso, nosso objetivo foi desenvolver um instrumento de avaliação do desempenho de estudantes de Medicina, no período do internato em pediatria, para uso durante o estágio realizado na Atenção Primária à Saúde. Realizou-se uma pesquisa metodológica com elaboração de um instrumento e contribuição de especialistas com experiência em ensino, por meio de convites eletrônicos. Ao final do estudo, utilizando-se a técnica Delphi, dos vinte itens constantes no instrumento original, dezessete foram aceitos pelos 11 especialistas que participaram das duas rodadas de análise. Dessa forma, a pesquisa alcançou seu objetivo e, por meio deste artigo, divulgamos a proposta de um "Instrumento de avaliação de internos de Medicina no estágio de pediatria na Atenção Primária à Saúde".
Medical students have contact with different areas and scenarios during their internship and must have their performance evaluated in each of them. However, as many students do not feel properly evaluated, our objective was to develop an instrument to evaluate the performance of Medical students, during their internship in pediatrics, to be used during their practice in Primary Health Care. A methodological research was carried out with the elaboration of an instrument and the contribution of specialists with experience in teaching, using electronic invitations. At the end of the study, through the Delphi technique, seventeen of the twenty items contained in the original instrument were accepted by the 11 specialists who participated in the two rounds of analysis. Thus, the research reached its objective and, through this article, we disseminate the proposal of an "Instrument for the evaluation of Medical interns in the pediatric internship in Primary Health Care".
Los estudiantes de Medicina tienen contacto con diferentes áreas y escenarios durante su pasantía y deben evaluar su desempeño en cada uno de ellos. Sin embargo, muchos estudiantes no se sienten debidamente evaluados y, ante eso, nuestro objetivo fue desarrollar un instrumento para evaluar la actuación de los estudiantes de Medicina, durante su pasantía en pediatría, para ser utilizado mientras ejecutan la Atención Primaria de Salud. Se realizó una investigación metodológica con la elaboración de un instrumento y el aporte de especialistas con experiencia en la docencia, a través de invitaciones electrónicas. Al final del estudio, utilizando la técnica Delphi, de los veinte ítems contenidos en el instrumento original, se aceptaron diecisiete por los 11 especialistas que participaron en las dos rondas de análisis. De esta forma, la investigación alcanzó su objetivo y, por medio de este artículo, divulgamos la propuesta de un "Instrumento para la evaluación de Médicos internos en el internado de pediatría en Atención Primaria de Salud".
Assuntos
Estudantes de Medicina , Avaliação EducacionalRESUMO
Introdução: O Exame Clínico Objetivo Estruturado é um dos métodos mais eficazes de avaliação do processo de aprendizagem, pois analisa o desempenho do participante em uma tarefa clínica especifica. Objetivo: Apresentar a vivência do serviço de Ginecologia sobre a elaboração e execução de uma estação do exame desenvolvido por uma universidade, promovendo uma reflexão sobre o processo de ensino aprendizagem dos alunos desta instituição. Relato de Experiência: O planejamento e organização demandaram um período de 4 meses, com definição do local, comissão de apoio técnico, elaboração dos casos clínicos e das competências a serem avaliadas, materiais disponíveis (impressos, canetas, móveis, dentre outros). Os professores elaboradores das estações foram previamente treinados pela comissão organizadora e orientados a formularem uma estação com caso clínico compatível com o momento do aluno no curso de Medicina. Outro instrumento elaborado foi o checklist, com pontos fundamentais que deveriam ser cumpridos pelo estudante avaliado. Após elaboração da estação e do seu checklist, estes foram avaliados pela comissão organizadora, com realização das correções pertinentes. Após aprovação, os professores, tanto elaboradores quanto avaliadores, realizaram a simulação da estação para identificação de possíveis erros, fatores complicadores e para cronometragem do tempo. Conclusão: O método desenvolvido apresentou características de grande importância e destaque, bem como fragilidades que precisam ser resolvidas.
Introduction: The Objective Structured Clinical Examination is one of the most effective methods of evaluating the learning process, as it analyzes the participant's performance in a specific clinical task. Objective: To present the experience of the Gynecology service on the preparation and execution of an exam station developed by a university, promoting a reflection on the teaching-learning process of students at this institution. Experience Report: Planning and organization required a period of 4 months, with definition of the location, technical support committee, preparation of clinical cases and skills to be evaluated, available materials (prints, pens, furniture, among others). The teachers who created the stations were previously trained by the organizing committee and instructed to formulate a station with a clinical case compatible with the student's current time in the Medicine course. Another instrument created was the checklist, with fundamental points that should be fulfilled by the student assessed. After preparing the station and its checklist, they were evaluated by the organizing committee, with relevant corrections made. After approval, the teachers, both developers and evaluators, carried out the station simulation to identify possible errors, complicating factors and to measure time. Conclusion: The developed method presented characteristics of great importance and prominence, as well as weaknesses that need to be.
RESUMO
Objetivo: construir e validar um Quiz de avaliação cognitiva sobre Febre Maculosa, voltado para avaliar o conhecimento de estudantes que moram e/ou frequentam cidades de risco para a doença. Métodos: estudo metodológico desenvolvido em três etapas: construção do Quiz; validação de aparência e conteúdo com nove juízes, com análise realizada através do cálculo de Índice de Validade de Conteúdo, com valor de corte 0,80; e validação semântica, seguindo a metodologia DISABKIDS® com 12 alunos de cursos técnicos profissionalizantes, com avaliação dos dados realizada por estatística descritiva, tendo sido utilizado o programa Statistical Package for the Social Sciences. Resultados: o processo de validação foi subdividido em duas etapas: validação de aparência e conteúdo por profissionais das áreas de biologia e educação e validação semântica por alunos de cursos profissionalizantes. O Quiz foi elaborado e aplicado e os resultados mostraram um índice de validade de conteúdo superior a 0,80 para todas as variáveis analisadas. Na validação semântica, o Quiz foi considerado como de fácil compreensão e não houve dificuldade para o preenchimento. Conclusão: o Quiz construído foi validado quanto à aparência, ao conteúdo e à semântica, tendo alcançado concordância satisfatória, o que garante ser um instrumento adequado para o processo de avaliação sobre a temática investigada. Com isso, espera-se contribuir para a difusão de conhecimento acerca da identificação dos fatores de risco e da prevenção da saúde relacionados à Febre Maculosa.(AU)
Objective: to create and validate a cognitive assessment Quiz about Spotted Fever, targeted at evaluating what students living in and/or traveling to risk cities know about the disease. Methods: a methodological study developed in three stages: creation of the Quiz; face and content validation with nine judges, with analysis performed by calculating the Content Validity Index, with a cutoff value of 0.80; and semantic validation, following the DISABKIDS®methodology with 12 students from professional technical courses, with data evaluation performed by means of descriptive statistics, using the Statistical Package for the Social Sciences program. Results: the validation process was subdivided into two stages: face and content validation by professionals in the Biology and Education areas, and semantic validation by students attending professional courses. The Quiz was prepared and applied and the results showed a Content Validity Index above 0.80 for all the variables analyzed. In the semantic validation, the Quiz was considered as easy to understand and there were no difficulties filling it in. Conclusion: the Quiz created was validated in terms of face, content and semantics, having achieved satisfactory agreement, which guarantees that it is an adequate instrument for the evaluation process on the theme investigated. With this, the expectation is to contribute to disseminating knowledge about the identification of risk and health prevention factors related to Spotted fever.(AU)
Objetivo: construir y validar un Cuestionario de evaluación cognitiva sobre la Fiebre Maculo-sa, destinado a evaluar los conocimientos de los estudiantes que viven y/o asisten a ciudades con riesgo para la enfermedad. Métodos: estudio metodológico desarrollado en tres etapas: construcción del Cuestionario; validación de apariencia y contenido con nueve jueces con aná-lisis realizado mediante el cálculo del Índice de Validez de Contenido, con un valor de corte de 0.80 y validación semántica, siguiendo la metodología DISABKIDS® con 12 estudiantes de carreras técnicas profesionales, con evaluación de datos realizada mediante estadística des-criptiva, donde se utilizó el programa Statistical Package for the Social Sciences. Resultados: el proceso de validación se subdividió en dos etapas: validación de apariencia y contenido por profesionales de las áreas de biología y educación, y validación semántica por estudiantes de carreras profesionales. El Cuestionario fue diseñado y aplicado. Los resultados mostraron un índice de validez de contenido superior a 0,8 para todas las variables analizadas...(AU)
Assuntos
Humanos , Masculino , Feminino , Adulto , Pessoa de Meia-Idade , Febre Maculosa das Montanhas Rochosas , Educação em Saúde/métodos , Inquéritos e Questionários , Fatores de Risco , Avaliação Educacional/métodos , Medição de Risco , Estudos de Validação como AssuntoRESUMO
Resumo: Introdução: Nas últimas décadas, as práticas pedagógicas e as metodologias de ensino têm experimentado mudanças radicais, culminando hoje com o crescimento exponencial de metodologias de ensino ativas. Apesar da crescente utilização dessas metodologias ativas nos cursos de Medicina, as formas de avaliação teórica foram pouco, ou nada, alteradas nas últimas décadas, o que não deveria ocorrer, pois os sistemas de avaliação precisam evoluir concomitantemente para garantir um processo de ensino-aprendizagem coeso e de qualidade. Objetivo: Este estudo evidencia como está inserida a avaliação com consulta em cursos de Medicina. Método: Foi desenvolvida uma revisão integrativa por meio de consulta de publicações indexadas no período dos últimos dez anos nas bases de dados da Biblioteca Nacional de Medicina dos Estados Unidos (PubMed), Scientific Electronic Library Online (SciELO), ScienceDirect e Education Resources Information Center (ERIC), em formato de artigos completos nas línguas portuguesa ou inglesa. Utilizaram-se os descritores a seguir de forma combinada, respectivamente em inglês e português: "medicine", "assessment", "open book examination", "open book exam", "open book test" e "open book assessment"; "medicina", "avaliação", "prova com consulta", "avaliação com consulta" e "teste com consulta". Resultado: Para a composição deste estudo, selecionaram-se 11 publicações que atenderam aos critérios de elegibilidade traçados, e, após a imersão teórica e análise delas, emergiram duas categorias principais: "A avaliação com consulta como recurso educacional para o ensino médico" e "A avaliação com consulta como alternativa pedagógica no cenário pandêmico", as quais foram analisados à luz de uma revisão integrativa. Conclusão: Ainda que haja dúvidas e sejam necessários novos estudos, fica evidente que a avaliação com consulta é muito pertinente ao ensino médico, uma vez que contribui para a formação de profissionais com alta capacidade de questionamento e argumentação, preparados para rotinas de estudo e educação permanentes e que entendam que há constante evolução do conhecimento na área médica.
Abstract: Introduction: In the last decades, pedagogical practices and teaching methodologies have experienced radical changes, culminating today with the exponential growth of active teaching methodologies. Despite the growing use of these active methodologies in medical courses, the theoretical evaluation models changed little, if at all, in the last decades, which should not occur, as the evaluation systems need to evolve concomitantly to ensure a cohesive, quality teaching-learning process. Objective: To demonstrate how open-book examination is inserted in medical courses. Methods: An integrative review was developed by searching for publications indexed in the last 10 years in the databases of the U.S. National Library of Medicine (PubMed), "Scientific Electronic Library Online" (SciELO), Science Direct, and the "Education Resources Information Center" (ERIC), as full articles written in Portuguese or English. The following descriptors were used in combination, respectively in English and Portuguese: "medicine", "assessment", "open book examination", "open book exam", "open book test" and "open book assessment"; "medicina", "avaliação", "prova com consulta", "avaliação com consulta" and "teste com consulta". Results: For this review, a total of eleven publications that met the eligibility criteria were selected, and after their theoretical immersion and analysis, two main categories emerged: "Open-book examination as an educational resource for medical education" and "Open-book examination as a pedagogical alternative in the pandemic scenario", which were analyzed in the light of an integrative review. Conclusion: Although there are still doubts and further studies are required, it is evident that Open-Book examination is very pertinent to medical education, as it contributes to the training of professionals with high capacity for questioning and debating, who are prepared for permanent study and education routines, and who understand that there is constant evolution of knowledge in the medical field.
RESUMO
Resumo: Introdução: Com a pandemia de Covid-19, instituições globais de saúde recomendaram a adoção de medidas restritivas, como o fechamento de unidades de ensino. As instituições de ensino tiveram que se adaptar ao ensino remoto emergencial de forma abrupta e com pouco tempo para preparo. Os alunos também tiveram desafios a serem enfrentados, como uso da internet e isolamento dentro de casa. O ensino superior na área de saúde também teve que se adequar a esse novo modelo com adaptação a práticas humanizadas. Objetivo: Este estudo teve como objetivo avaliar a percepção da utilização do ensino remoto emergencial por discentes em uma universidade pública de saúde durante a pandemia da Covid-19. Método: Trata-se de uma pesquisa descritiva e exploratória, com delineamento transversal e abordagem quantitativa, realizada por meio de aplicação de um questionário com perguntas fechadas. O questionário foi dividido em quatro tópicos: caracterização da amostra, condições de uso da internet, condições do local do estudo e percepção do estudante acerca da utilização do ensino remoto. Resultado: Participaram do estudo 480 alunos dos cursos de Enfermagem, Medicina e Odontologia da Universidade do Estado do Amazonas. A maioria desses alunos utilizou wi-fi residencial, com qualidade de sinal regular, e aqueles que residem no interior do estado foram os mais prejudicados por conta da inconstância da internet. Os alunos assistiram predominantemente às aulas no quarto e apontaram a fácil desconcentração como o fator mais prejudicial das aulas remotas. A maioria dos alunos discorda da eficácia das avaliações para esse tipo de ensino, assim como avalia de forma insatisfatória a experiência com o ensino remoto. No entanto, a maioria concordou que é possível aprender o conteúdo teórico com qualidade no ensino remoto. Conclusão: A pandemia de Covid-19 acarretou uma mudança repentina de cenário. O novo modelo educacional, de educação a distância, trouxe novos desafios para o ensino. Os resultados evidenciam que os fatores que prejudicaram os estudantes foram a instabilidade da internet e a dificuldade em se concentrar durante a aprendizagem remota. Houve facilidade para os discentes esclarecerem as dúvidas das aulas com os docentes, o que corrobora o ensino e a aprendizagem da parte teórica por meio desse sistema.
Abstract: Introduction: The onset of the Covid-19 pandemic led global health institutions to recommend the adoption of restrictive measures such as the closure of educational facilities. Educational institutions were forced to suddenly adapt to emergency distance learning methods, with little time for preparation. The students also faced challenges such as relying on the internet and remaining isolated at home. Medical and health science schools also had to adapt to this new model to humanized practices. Objective: To evaluate the perceived use of emergency distance learning by students at a state university health sciences and medical school during the Covid-19 Pandemic. Method: This is a descriptive and exploratory study, with a cross-sectional design and quantitative approach, involving the application of a questionnaire containing closed questions. The questionnaire was divided into four topics: sample characterization, conditions for internet use, study site conditions, and student perception of the use of distance learning. Result: The study included 480 students from the nursing, medicine, and dentistry courses at the Amazonas State University. Most of these students used their home wifi, with regular signal quality. Students from smaller, inner state towns were the most disadvantaged by inconsistent internet connections. Students were mainly in their bedrooms when they attended the and pointed to losing concentration easily as the main detrimental factor of the remote classes. Most students disagreed with the effectiveness of assessments for this type of learning,and rated the experience with remote teaching as unsatisfactory. However, most students agreed that it is possible to learn theoretical content with quality through distance learning. Conclusion: The Covid-19 pandemic brought about a sudden change of scenery. The new educational model, using distance learning, has brought new challenges for teaching. The results show that the factors that hindered the students were the instability of their internet connection and difficulty in maintaining concentration during distance learning classes. Students found it easy to clarify doubts about the classes with the teachers; the system proved adequate for the teaching and learning of the theoretical content.
RESUMO
Resumo: Introdução: O Professionalism Mini-Evaluation Exercise (P-MEX) é instrumento que avalia 21 habilidades de profissionalismo, distribuídas em quatro domínios. Objetivo: Este estudo teve como objetivos traduzir, adaptar e validar um instrumento de avaliação de profissionalismo médico. Método: Após a autorização do autor do P-MEX, realizaram-se a tradução do instrumento para a língua portuguesa, a análise de equivalência linguística e validade de conteúdo por especialistas em educação, e o exame de validade operacional em OSCE virtual entre estudantes do internato médico. Resultado: Houve elevada equivalência dos itens da versão em português do Brasil por especialistas em educação. O índice de validade de conteúdo da escala foi de 0,96. Seis professores validaram o P-MEX em ambiente de simulação para 27 estudantes do internato médico. Conclusão: A versão brasileira do P-MEX demonstrou ser adequada para avaliar o profissionalismo médico no contexto brasileiro, com boa validade operacional em cenário de simulação virtual.
Abstract: Introduction: "Professionalism Mini-Evaluation Exercise" (P-MEX) is an instrument that assesses 21 professionalism skills, distributed in four domains. Objective: To translate, adapt and analyze the validity of the medical professionalism evaluation exercise. Methods: After authorization from the author, the following tasks were performed: translation into Portuguese; linguistic equivalence and content validity analysis by education experts; operational validity analysis in virtual OSCE among medical clerkship students. Results: There was high equivalence of the items in the Brazilian Portuguese version by education specialists. The Scale Content Validity Index was 0.96. Six teachers validated the P-MEX in a simulation environment to 27 medical clerkship students. Conclusion: The Brazilian version of the P-MEX proved to be adequate to assess medical professionalism in the Brazilian context, and showed good operational validity in a virtual simulation scenario.
RESUMO
Resumen Se analiza la brecha por sexo en matemáticas (razonamiento cuantitativo) en universitarios de Colombia, con base en los resultados de las pruebas estatales de salida de la educación superior Saber Pro, 2018; incluyendo el factor regional. A partir de una modelación cuantílica y una descomposición Juhn-Murphy-Pierce; se identifica la existencia y persistencia de una brecha por sexo en el área evaluada, y diferencias entre las regiones Andina y Caribe. Se destaca: favorabilidad hacia los hombres; importancia de las características educativas e institucionales; importancia de las matemáticas de secundaria (explican cerca del 25% del diferencial); ampliación de la brecha en los cuartiles más altos; v) heterogeneidad regional de la brecha, ampliada por la interacción sexo-región.
Resumo A diferença de gênero em matemática (raciocínio quantitativo) entre estudantes universitários na Colômbia é analisada, com base nos resultados dos exames de saída do ensino superior estadual Saber Pro 2018, incluindo o fator regional. Com base na modelização de quantis e numa decomposição Juhn-Murphy-Pierce, identificamos a existência e persistência de uma diferença de gênero na área avaliada, bem como diferenças entre as regiões andinas e das Caraíbas. Destacam-se: favorabilidade em relação aos homens; importância das características educacionais e institucionais; importância da matemática secundária (explicando cerca de 25% do diferencial); alargamento da lacuna nos quartis mais altos; e heterogeneidade regional da lacuna, amplificada pela interação gênero-região.
Abstract The paper analyzes the gender gap in mathematics (quantitative reasoning) among Colombian university students, based on the results of the State higher education exit tests Saber Pro, 2018; including the regional factor. Based on a quantile modeling and a Juhn-Murphy-Pierce decomposition, the study identifies the existence and persistence of a gender gap in the evaluated area and differences between the Andean and Caribbean regions. The most remarkable points include: favouring men; importance of educational and institutional characteristics; importance of secondary mathematics (accounting for about 25% of the differential); widening of the gap in the highest quartiles; and regional heterogeneity of the gap, widened by gender-region interaction.
Assuntos
Humanos , Estudantes , Universidades , Colômbia , Mulheres , Educação , Estudos de Gênero , HomensRESUMO
ABSTRACT Introduction: competency-based medical education is well established, but there is a worldwide shortage of instruments capable of assessing these doctors in training. Objective: to validate the instrument The Otolaryngology - Head and Neck Surgery Milestone Project for use in Residency Programs in Otorhinolaryngology in Brazil. Method: The study had 5 stages. In stage I, two independent translations of the Milestones Project in otorhinolaryngology were carried out. In step II, a synthesis of the translations was performed. Subsequently, the competencies required by the Brazilian Association of Otorhinolaryngology for training otorhinolaryngologists in Brazil were added. In step III, a back-translation of the instrument was carried out and sent to the original authors. Then, the instrument was sent to be evaluated by a committee of 8 experts. In stage IV, each expert made comments about each of the items, and after analyzing the suggestions, a new instrument was created. In stage V, this instrument was sent for evaluation by otorhinolaryngologists across the country. Results: after translations and expert evaluation, an instrument with 19 items was created. The instrument was submitted to analysis by Otorhinolaryngologists from all over Brazil. Acceptance percentages were: applicability (99.25%), reliability (99.5%), reproducibility (98.6%), reliability (93.84%), relevance (93.15%). Conclusion: the created instrument was considered applicable, reproducible, relevant, reliable and trustworthy, presenting content validity.
RESUMO Introdução: a formação médica baseada em competências é bem estabelecida, mas há uma escassez mundial de instrumentos capazes de avaliar esses médicos em formação. Objetivo: validar o instrumento The Otolaryngology - Head and Neck Surgery Milestone Project para uso nos Programas de Residência em Otorrinolaringologia no Brasil. Método: o estudo conteve 5 etapas. Na etapa I foram realizadas duas traduções independentes do Projeto Milestones em otorrinolaringologia. Na etapa II, foi realizada uma síntese das traduções. Posteriormente foram acrescentadas as competências que a Associação Brasileira de Otorrinolaringologia exige para formação do otorrinolaringologista no Brasil. Na etapa III foi realizada uma retro tradução do instrumento e enviado para os autores originais. Em seguida, o instrumento foi enviado para ser avaliado por um comitê com 8 experts. Na etapa IV, cada expert fez comentários acerca de cada um dos itens, e após análise das sugestões foi criado um novo instrumento. Na etapa V, este instrumento foi enviado para apreciação de otorrinolaringologistas de todo o país. Resultados: após as traduções e apreciação dos experts foi criado um instrumento com 19 itens. O instrumento foi submetido à análise de Otorrinolaringologistas de todo Brasil. As percentagens de aceitação foram: aplicabilidade (99,25%), fidedignidade (99,5%), reprodutibilidade (98,6%), confiabilidade (93,84%), relevância (93,15%). Conclusão: o instrumento criado foi considerado aplicável, reprodutível, relevante, confiável e fidedigno, apresentando validade de conteúdo.
RESUMO
Resumo: Introdução: O Teste de Progresso (TP) constitui modalidade estabelecida e bem-sucedida de avaliação de conhecimentos do estudante das profissões da saúde, principalmente os de Medicina, com potencial de contribuir substancialmente para as finalidades formativa e informativa (controle de qualidade e indicação de melhoria nos processos de ensino e aprendizagem). Adicionalmente, o TP apresenta características adequadas à sua inclusão em sistemas institucionais de avaliação que privilegiem a finalidade formativa, como a avaliação programática (AP), mas que cumprem também a somativa. Nas escolas que vêm definindo ações visando à introdução da AP em seus cursos de graduação, é necessária a reflexão sobre as fortalezas e limitações da utilização do TP no sistema de avaliação. Desenvolvimento: A partir das considerações de um grupo de trabalho representativo de toda a instituição, incumbido de propor meios de introdução da AP em um novo currículo para o curso de Medicina, contando com assessoria internacional com experiência tanto no TP como na AP, elaborou-se reflexão sobre esse tema, baseada na experiência dos autores e em dados da literatura. Propõe-se que, dentro da perspectiva longitudinal da AP, o TP constitua um dos pilares na avaliação de conhecimentos. O TP pode servir de base para acompanhamento do estudante, no contexto da sua turma (coorte), e seus resultados devem ser discutidos com o mentor que o acompanha e lhe dá suporte. O TP deve ter também papel central na gestão, como fonte de informações para eventual revisão e qualificação do currículo e das suas atividades de ensino e aprendizagem. É previsível que a utilização do TP na AP traga diferentes desafios e barreiras, que serão mais facilmente superados se houver na instituição experiências já consolidadas de aplicação de exames institucionais e de desenvolvimento docente para a elaboração de questões objetivas de boa qualidade. Conclusão: A efetividade do TP dentro do sistema institucional de AP vai depender de medidas que visem aumentar a sua efetividade na avaliação e que estimulem a participação ativa do estudante, refletindo sobre seu desempenho no TP, com o apoio do seu mentor, de modo a se engajar em ações que fomentem a autorregulação da aprendizagem.
Abstract: Introduction: The Progress Test (PT) is a well-established and mostly successful modality of student knowledge assessment in the health professions, mainly those in the medical area, with the potential to contribute substantially to the formative and informative purposes (quality control and indication of improvement in the teaching-learning processes). Additionally, the PT has characteristics that are adequate for its inclusion in institutional evaluation systems that facilitate the formative purpose, such as programmatic assessment (PA), but that also meet the summative purpose. In schools that have defined actions aimed at introducing PA in their undergraduate courses, it is necessary to reflect on the strengths and limitations of using PT in the evaluation system. Development: based on the considerations of a working group representative of the entire institution, tasked with proposing means of introducing PA in a new curriculum for the medical course, with international advice with experience in both PT and PA, we generated a reflection on this topic, based on the authors' experience and data from the literature. It is proposed that, within the longitudinal perspective of the PA, the PT constitutes one of the pillars in the assessment of knowledge. The PT can be used as a basis for monitoring the students, in the context of their class (cohort), and its results should be discussed with the mentors who accompanies and supports them. The PT must also play a central role in management, as a source of information for eventual review and qualification of the curriculum and its teaching-learning activities. It is predictable that the use of the PT in PA will bring different challenges and barriers, which will be more easily overcome if the institution has already consolidated experiences in the application of institutional exams and in faculty development for the production of good quality objective questions. Conclusion: the effectiveness of the PT within the institutional PA system will depend on measures aimed at increasing its effectiveness in the assessment and that encourage the student's active participation, reflecting on their performance in the PT, with the support of their mentor, aiming to engage in actions that encourage learning self-regulation.
RESUMO
Resumo Introdução: Nos últimos anos, ocorreu um aumento da quantidade de faculdades médicas no Brasil, e, concomitante a isso, houve a ampliação do interesse em melhorar a qualidade do ensino na Medicina. Um questionamento resultante dessa mudança é se esse aumento de faculdades de Medicina implicará a formação de profissionais capazes de atender às demandas da sociedade contemporânea. Uma forma de responder a esse questionamento é conhecer o perfil dos egressos das instituições. Objetivo: Este estudo teve como objetivo avaliar o perfil dos egressos médicos formados em uma instituição de ensino superior do Nordeste do Brasil. Método: Realizou-se um estudo transversal do tipo pesquisa de campo com abordagem quantitativa. Egressos do curso de Medicina de uma instituição de ensino superior, formados no período de 2012-2019, foram avaliados por meio de um questionário enviado via e-mail, com perguntas de múltipla escolha. O estudo foi aprovado pelo Comitê de Ética da instituição. Resultado: Analisaram-se 127 questionários, o que corresponde a uma taxa de resposta de 13,8%, e o sexo feminino predominou ao representar 67,7% da amostra. O conhecimento sobre as Diretrizes Curriculares Nacionais durante a graduação foi relatado por 24,2% dos participantes. A maioria dos egressos demonstrou satisfação com o curso realizado e sentimento de preparo para atuação profissional como generalista. Em relação à residência médica, 90,5% dos egressos realizaram esse tipo de programa de especialização. A atuação profissional dos egressos na Estratégia Saúde da Família e no Sistema Único de Saúde (SUS) foi identificada em 66,9% e 84,3%, respectivamente. Sentimento de aptidão e de habilidade para lidar com educação em saúde, gestão da saúde e atenção à saúde da população foi identificado na maioria dos egressos. Conclusão: Identificamos uma boa satisfação ao final do curso e um sentimento de confiança para atuação profissional na maioria dos egressos. Aperfeiçoamento por meio de residência médica é um objetivo frequente entre os egressos. O SUS é um campo de trabalho para a maioria destes. Além disso, aptidões recomendadas pelas Diretrizes Curriculares Nacionais foram percebidas pelos egressos ao final da graduação. Futuros trabalhos com amostras maiores e multicêntricos são necessários para a avaliação do perfil dos egressos no Brasil.
Abstract Introduction: In recent years, there has been an increase in the number of medical schools in Brazil and, concomitantly, the interest in improving the quality of teaching in medicine has increased. One question resulting from this change is whether this increase in medical schools will imply the training of professionals capable of meeting the demands of contemporary society. One way to answer this question is to know the profile of the institutions' graduates. Objective: To evaluate the profile of medical graduates trained at a higher education institution in northeast Brazil. Method: A cross-sectional field research study with a quantitative approach was carried out. Graduates of the medical course of a higher education institution, graduated from 2012 to 2019, were evaluated through a questionnaire sent via e-mail, with multiple choice questions. The study was approved by the institution's ethics committee. Results: A total of 127 questionnaires were analyzed, which corresponds to a response rate of 13.8%; females predominated, representing 67.7% of the sample. Knowledge about the National Curriculum Guidelines during undergraduate school was reported by 24.2% of the participants. Most graduates demonstrated satisfaction with the course taken and a feeling of being prepared for professional work as a generalist. Regarding medical residency, 90.5% of the graduates attended this type of specialization program. Professional performance of graduates in the Family Health Strategy and in the Brazilian Unified Health System (SUS) was identified in 66.9% and 84.3%, respectively. A feeling of aptitude and ability to deal with health education, health management and health care for the population was identified in most graduates. Conclusion: We identified good satisfaction at the end of the course and a feeling of confidence for professional performance in most graduates. Improvement through medical residency is a frequent goal among graduates. The SUS is a field of work for most of these professionals. In addition, skills recommended by the National Curriculum Guidelines were perceived by them at the end of undergraduate school. Future studies with larger and multicenter samples are needed to assess the profile of graduates in Brazil.
RESUMO
Resumo Introdução O conceito de qualidade de vida é multidimensional, apresenta uma organização complexa e dinâmica dos seus componentes, difere de pessoa para pessoa de acordo com seu ambiente/contexto e mesmo entre duas pessoas inseridas em um contexto similar. Em dezembro de 2019 surgiu na China uma epidemia pelo coronavírus, surgindo a necessidade de mudanças, incluindo isolamento social e ensino a distância. Objetivo Avaliar o impacto do isolamento social e ensino a distância na qualidade de vida dos graduandos da área da saúde da Universidade Federal de Sergipe. Material e método Foi aplicado aos estudantes de graduação da área de saúde da Universidade Federal de Sergipe, no período de janeiro de 2021, o questionário de qualidade de vida, Short-Form Health Survey. O questionário foi aplicado via o sistema online. Resultado Foram aplicados 678 questionários, sendo 672 concordando em participar do estudo. Dos estudantes avaliados, 58% eram do sexo feminino e 50% com idade de 21 a 25 anos. Ao se analisar o questionário, verifica-se que para capacidade funcional os valores variaram de 80 a 89, ou seja, com bom escore de qualidade de vida. Os aspectos emocionais apresentaram os menores escores e 21 a 37,3, sendo o pior resultado encontrado nos estudantes do curso de fonoaudiologia. Não houve diferença estatisticamente significativa entre os diferentes cursos de saúde estudados. Conclusão Verifica-se que o aspecto emocional tem sido o mais afetado entre os estudantes de saúde da Universidade Federal de Sergipe.
Abstract Introduction The concept of quality of life is multidimensional, presents a complex and dynamic organization of its components, and differs from person to person according to the environment/context and even between two people in a similar context. In December 2019, a Coronavirus epidemic emerged in China, aiming to make some changes, including social isolation and distance learning. Objective Evaluate the impact of social isolation and distance learning on the quality of life of undergraduates in the health area at the Federal University of Sergipe. Material and method The quality of life questionnaire, Short-Form Health Survey, was applied to undergraduate students in the health area at the Federal University of Sergipe in January 2021. The questionnaire was applied online. Result 678 questionnaires were applied, with 672 agreeing to participate in the study. According to the evaluated students, 58% were female and 50% were aged from 21 to 25 years. When analyzing the questionnaire, it appears that the values ranged from 80 to 89 for functional capacity, with a good quality of life score. Emotional aspects had the lowest scores from 21 to 37.3, the worst result in speech therapy students. There was no statistically significant difference between the different health courses studied. Conclusion It appears that the emotional aspect has been the most affected among health students at the Federal University of Sergipe.
RESUMO
ABSTRACT Progress Testing (PT) is an assessment tool whose use has grown throughout Brazil in the last decade. PT makes it possible to assess the students' knowledge gain throughout the undergraduate course and, for their interpretations to be valid, their items (questions) must have adequate quality from the point of view of content validity and reliability of results. In this study, we analyzed the psychometric characteristics of the items and the performance of students in the content area of surgery from 2017 to 2023. For the analyses, we used the assumptions of Classical Test Theory, Bloom's taxonomy and Cronbach's alpha reliability coefficient. The items were easy (average difficulty index between 0.3-0.4), with fair to good discrimination (discrimination index between 0.3-0.4) and with a predominance of medium to high taxonomy. Reliability remained substantial over the years (>0.6). Students' knowledge gain in surgery was found to be progressive and more important from the 3rd year of the undergraduate course, reaching approximately 70-75% in the 6th year. This measurements framework can be replicated in other contexts for a better understanding of student learning and for qualification of evaluation processes.
RESUMO O Teste de Progresso (TP) é uma ferramenta de avaliação cujo uso tem crescido em todo o Brasil na última década. O TP permite avaliar o ganho de conhecimento dos estudantes ao longo do curso de graduação e, para que suas interpretações sejam válidas, é preciso que seus itens (questões) tenham qualidade adequada do ponto de vista de validade de conteúdo e confiabilidade de resultados. Neste estudo, analisamos as características psicométricas dos itens e o desempenho dos estudantes na área de cirurgia do TP de 2017 a 2023. Para as análises, usamos os pressupostos da Teoria Clássica dos Testes, a taxonomia de Bloom e o coeficiente de fidedignidade alfa de Cronbach. Os itens se mostraram fáceis (índice de dificuldade média entre 0,3-0,4), com discriminação de regular a boa (índice de discriminação entre 0,3-0,4) e com predomínio de questões de média a alta taxonomia. A confiabilidade se manteve substancial ao longo dos anos (>0,6). O ganho de conhecimento dos estudantes em cirurgia é progressivo e mais importante a partir do 3º ano do curso de graduação, chegando a aproximadamente 70-75% no 6º ano. Este arcabouço de aferições pode ser replicado em outros contextos para melhor compreensão do aprendizado dos estudantes e para qualificação dos processos avaliativos.
RESUMO
Resumo Introdução: A avaliação formativa é um processo multifacetado que visa contribuir para a formação de um profissional autônomo e reflexivo. É um recurso poderoso na educação médica. Objetivo: Este estudo teve como objetivo conhecer o processo de avaliação formativa no internato do curso de graduação em Medicina do campus Natal da Universidade Federal do Rio Grande do Norte. Método: Trata-se de uma pesquisa observacional com abordagem quantitativa, por meio de aplicação de questionário aos docentes e discentes do internato em modos on-line e presencial, no período de julho a dezembro de 2021. Resultado: Responderam ao questionário 27 docentes e 79 discentes. Os docentes têm uma percepção mais positiva que seus alunos, pois 51,9% deles assumiram realizar avaliação formativa, enquanto apenas 41,7% dos discentes do quinto ano e 35,5% dos discentes do sexto ano reconhecem que a realizam. Em relação à definição dos objetivos de aprendizagem, 70,4% dos docentes afirmaram que os apresentam, enquanto apenas 25% e 16,1% dos discentes, respectivamente do quinto e sexto anos, reconheceram que são apresentados a eles. Os docentes e discentes também têm percepções diferentes em relação ao feedback e ao uso de TIC na avaliação formativa, pois, enquanto 70,4% dos docentes assumiram que realizam feedback, apenas 27,1% e 16,1% dos internos do quinto e sexto anos, respectivamente, reconheceram receber com frequência o feedback. Já o uso de TIC foi percebido como razoável por 44,4% dos docentes e muito utilizado pela maioria dos discentes. Discussão de casos foi o método de avaliação formativa mais reconhecido por ambos. Conclusão: Os docentes e discentes têm percepções distintas sobre a realização de avaliação formativa no internato de Medicina, e ambos concordam que a capacitação docente é imprescindível para melhorar o processo avaliativo. Percebe-se a necessidade de mais discussões sobre o tema para criar uma cultura de avaliação formativa que mobilize docentes e discentes.
Abstract Introduction: Formative assessment is a multifaceted process, which aims to contribute to the formation of an autonomous and reflective professional. It is a powerful resource in medical education. Objective: To learn about the formative assessment process in the undergraduate medical internship program at the Natal campus of the Federal University of Rio Grande do Norte. Method: This is an observational study with a quantitative approach, involving the online and in-person application of a questionnaire to teachers and student interns, from July to December 2021. Result: Twenty-seven teachers and 79 students answered the questionnaire. The teachers reported a more positive perception than their students, since 51.9% of them have delivered formative assessment, while only 41.7% of 5th year students and 35.5% of 6th year students recognize its performance. Likewise in relation to the definition of learning objectives: 70.4% of teachers stated that they present these objectives, whereas only 25% and 16.1% of the 5th and 6th year students, respectively, recognize such presentation. The teachers and students also have different perceptions in relation to feedback and the use of ICTs in formative assessment: whereas 70.4% of the teachers considered that they provide feedback, only 27.1% and 16.1% of the 5th and 6th year interns respectively, acknowledged receipt of frequent feedback. The use of ICTs was perceived as reasonable by 44.4% of the teachers and widely used by most students. The discussion of cases was the formative assessment method most widely recognized by both groups. Conclusion: Teachers and students have different perceptions about the execution of formative assessment in medical internships, and both agree on the need for teacher training to improve the assessment process. There is a need for more discussions on the subject to create a culture of formative assessment that engages teachers and students.
RESUMO
ABSTRACT Objective: to build, evaluate and test two clinical simulation scenarios for the planning and management of infusion therapy by nurses. Methods: methodological study, with construction of scenarios based on the NLN Jeffries Simulation Theory and the theoretical model Vessel Health Preservation; evaluation of the scenario design by judges, with calculation of the Modified Kappa Coefficient (MKC); testing scenarios with the target audience. Results: scenarios built for: 1. Patient assessment and vascular device selection; and 2. Identification and management of deep vein thrombosis. In the evaluation by judges, testing of validated scenarios in relation to educational practices and simulation design, the items evaluated presented MKC values ≥ 0.74. Conclusion: two evidence-based scenarios related to infusion therapy were constructed, with high levels of agreement among judges regarding their design. In testing with nurses, good results were obtained regarding the design and structuring of educational practice.
RESUMEN Objetivo: construir, evaluar y probar dos escenarios de simulación clínica para planificar y gestionar terapias de infusión por enfermeros. Métodos: es un estudio metodológico, con escenarios basados en la Teoría de la Simulación de Jeffries NLN y en el modelo teórico Vessel Health Preservation; evaluación del diseño de los escenarios por jueces mediante cálculo del Coeficiente de Kappa Modificado (CKM); prueba de los escenarios con el público-objeto. Resultados: escenarios construidos para: 1. evaluación de pacientes y selección de dispositivos vasculares; y 2. identificación y manejo de trombosis venosa profunda. En la evaluación por jueces, en la prueba de los escenarios validados respecto a las prácticas educativas y en el diseño de la simulación, los ítems sopesados alcanzaron el CKM ≥ 0,74. Conclusión: se construyeron dos escenarios sobre evidencias relacionadas con la terapia de infusión, con valores de concordancia altos entre los jueces, referente a su diseño. En las pruebas con enfermeros, se obtuvieron buenos resultados en cuanto al diseño y a la estructuración de la práctica educativa.
RESUMO Objetivo: construir, avaliar e testar dois cenários de simulação clínica para o planejamento e gerenciamento da terapia infusional pelo enfermeiro. Método: estudo metodológico, com construção de cenários baseado na NLN Jeffries Simulation Theory e no modelo teórico Vessel Health Preservation; avaliação do desenho dos cenários por juízes, com cálculo do Coeficiente de Kappa Modificado (CKM); testagem dos cenários com o público-alvo. Resultados: cenários construídos para: 1. Avaliação do paciente e seleção do dispositivo vascular; e 2. Identificação e gerenciamento de trombose venosa profunda. Na avaliação por juízes, na testagem dos cenários validados em relação às práticas educativas e ao design da simulação, os itens apreciados apresentaram valores do CKM ≥ 0,74. Conclusão: foram construídos dois cenários baseados em evidências relacionadas à terapia infusional, com elevados valores de concordância dos juízes, quanto ao seu desenho. Na testagem com enfermeiros, obteve-se bons resultados quanto ao desenho e estruturação da prática educativa.