Reflexões sobre a utilização do Teste de Progresso na avaliação programática do estudante / Reflections on the use of the Progress Test in the programmatic student assessment

Resumo: Introdução: O Teste de Progresso (TP) constitui modalidade estabelecida e bem-sucedida de avaliação de conhecimentos do estudante das profissões da saúde, principalmente os de Medicina, com potencial de contribuir substancialmente para as finalidades formativa e informativa (controle de qualidade e indicação de melhoria nos processos de ensino e aprendizagem). Adicionalmente, o TP apresenta características adequadas à sua inclusão em sistemas institucionais de avaliação que privilegiem a finalidade formativa, como a avaliação programática (AP), mas que cumprem também a somativa. Nas escolas que vêm definindo ações visando à introdução da AP em seus cursos de graduação, é necessária a reflexão sobre as fortalezas e limitações da utilização do TP no sistema de avaliação. Desenvolvimento: A partir das considerações de um grupo de trabalho representativo de toda a instituição, incumbido de propor meios de introdução da AP em um novo currículo para o curso de Medicina, contando com assessoria internacional com experiência tanto no TP como na AP, elaborou-se reflexão sobre esse tema, baseada na experiência dos autores e em dados da literatura. Propõe-se que, dentro da perspectiva longitudinal da AP, o TP constitua um dos pilares na avaliação de conhecimentos. O TP pode servir de base para acompanhamento do estudante, no contexto da sua turma (coorte), e seus resultados devem ser discutidos com o mentor que o acompanha e lhe dá suporte. O TP deve ter também papel central na gestão, como fonte de informações para eventual revisão e qualificação do currículo e das suas atividades de ensino e aprendizagem. É previsível que a utilização do TP na AP traga diferentes desafios e barreiras, que serão mais facilmente superados se houver na instituição experiências já consolidadas de aplicação de exames institucionais e de desenvolvimento docente para a elaboração de questões objetivas de boa qualidade. Conclusão: A efetividade do TP dentro do sistema institucional de AP vai depender de medidas que visem aumentar a sua efetividade na avaliação e que estimulem a participação ativa do estudante, refletindo sobre seu desempenho no TP, com o apoio do seu mentor, de modo a se engajar em ações que fomentem a autorregulação da aprendizagem.

Abstract: Introduction: The Progress Test (PT) is a well-established and mostly successful modality of student knowledge assessment in the health professions, mainly those in the medical area, with the potential to contribute substantially to the formative and informative purposes (quality control and indication of improvement in the teaching-learning processes). Additionally, the PT has characteristics that are adequate for its inclusion in institutional evaluation systems that facilitate the formative purpose, such as programmatic assessment (PA), but that also meet the summative purpose. In schools that have defined actions aimed at introducing PA in their undergraduate courses, it is necessary to reflect on the strengths and limitations of using PT in the evaluation system. Development: based on the considerations of a working group representative of the entire institution, tasked with proposing means of introducing PA in a new curriculum for the medical course, with international advice with experience in both PT and PA, we generated a reflection on this topic, based on the authors' experience and data from the literature. It is proposed that, within the longitudinal perspective of the PA, the PT constitutes one of the pillars in the assessment of knowledge. The PT can be used as a basis for monitoring the students, in the context of their class (cohort), and its results should be discussed with the mentors who accompanies and supports them. The PT must also play a central role in management, as a source of information for eventual review and qualification of the curriculum and its teaching-learning activities. It is predictable that the use of the PT in PA will bring different challenges and barriers, which will be more easily overcome if the institution has already consolidated experiences in the application of institutional exams and in faculty development for the production of good quality objective questions. Conclusion: the effectiveness of the PT within the institutional PA system will depend on measures aimed at increasing its effectiveness in the assessment and that encourage the student's active participation, reflecting on their performance in the PT, with the support of their mentor, aiming to engage in actions that encourage learning self-regulation.

Evaluación de Pensamiento Crítico en estudiantes de Trabajo Social de la región de Atacama-Chile / Evaluation of critical thinking in Social Work students of the Atacama Region-Chile / Avaliação do Pensamento Crítico no Trabalho Social estudantes da região do Atacama - Chile

RESUMEN El pensamiento crítico es un conjunto de habilidades que permiten al ser humano mejorar su pensamiento, autorregularse y tomar decisiones a partir de lo que piensa y cree. La presente investigación es cuantitativa de tipo descriptivo, con el objetivo de evaluar el pensamiento crítico en 119 estudiantes de Trabajo Social de una universidad estatal al norte de Chile, de los cuales el 19% eran hombres y el 8I% mujeres, con un rango de edad entre los 18 a 31 años. Los resultados señalan que 27% de los estudiantes tienen un pensamiento crítico muy alto, 25% nivel medio, 23% nivel bajo, 18% nivel alto y 7% nivel muy bajo. Igualmente, se destaca que los estudiantes de mayor edad, procedentes de instituciones educativas públicas e hijos de padres con niveles de formación de postgrado tienen mejor pensamiento crítico. En este sentido, es imprescindible implementar en la educación superior programas y metodologías que estimulen en el estudiante el desarrollo de habilidades de pensamiento crítico, así como la adquisición de una postura reflexiva para la resolución de problemas académicos y sociales.

ABSTRACT Critical thinking is a set of skills that allow human beings to improve their thinking, self-regulate and make decisions based on what they think and believe. The present research is quantitative of descriptive type, with the objective of evaluating critical thinking in 119 students of Social Work of a state university in the north of Chile, of which 19% were men and 81% women, with a range of age between 18 and 31 years. The results indicate that 27% of students have very high critical thinking, 25% average level, 23% low level, 18% high level and 7% very low level. It also highlights that older students from public educational institutions and children of parents with postgraduate education levels have better critical thinking. In this sense, it is essential to implement in higher education programs and methodologies that stimulate in the student the development of critical thinking skills, as well as the acquisition of a reflective posture for the resolution of academic and social problems.

RESUMO O pensamento crítico é um conjunto de habilidades que permitem aos seres humanos melhorar seu pensamento, auto-regulamentar e tomar decisões baseadas no que eles pensam e acreditam. A presente pesquisa é quantitativa e descritiva, com o objetivo de avaliar o pensamento crítico em 119 estudantes de Serviço Social de uma universidade estadual do norte do Chile, dos quais I9% eram homens e 8I% mulheres, com uma faixa etária entre 18 e 31 anos. Os resultados mostram que 27% dos alunos têm um nível muito alto de pensamento crítico, 25% um nível médio, 23% um nível baixo, 18% um nível alto e 7% um nível muito baixo. Da mesma forma, destaca-se que os alunos mais velhos, provenientes de instituições públicas de ensino e filhos de pais com níveis de formação de pós-graduação, têm um melhor pensamento crítico. Neste sentido, é essencial implementar programas e metodologias no ensino superior que estimulem o desenvolvimento de habilidades de pensamento crítico nos estudantes, assim como a aquisição de uma postura reflexiva para a resolução de problemas acadêmicos e sociais

Exames de licenciamento em Medicina - uma boa ideia para a formação médica no Brasil? / Medical licensing examinations - are they a good idea for medical education in Brazil? / Exámenes de licencia en Medicina - ¿Una buena idea para la formación médica en Brasil?

A sociedade brasileira vem discutindo, recentemente, a ideia de implementar um exame de licenciamento em Medicina (ELM) para médicos recém-formados no país. Para avaliar a adequação dessa proposta e sua real necessidade, analisa-se neste trabalho se os ELMs estabelecem eficazmente a aptidão dos recém-formados para exercer a Medicina e se os sistemas de avaliação vigentes no ensino médico brasileiro já o fazem. Usando o modelo baseado em competências como referencial, discute-se a experiência da comunidade internacional com os ELMs e as características das avaliações que se propõem a medir, no Brasil, a aptidão dos recém-formados. Conclui-se que, isoladamente, ambas as alternativas são ineficazes para cumprir esse objetivo. Propõe-se o desenvolvimento de um programa mais amplo de avaliação e enfatiza-se a importância da colaboração entre os atores envolvidos para aprimorar a qualidade das avaliações dos médicos recém-formados no Brasil.(AU)

The introduction a medical licensing examination (MLE) for the country's newly qualified doctors has been the subject of discussion recently in Brazil. To assess the suitability of and real need for this test, this article analyzes whether the MLE provides an effective measure of the aptitude of newly qualified doctors and whether the evaluation system currently in place in medical education already does this. Using a competency-based model, we discuss experiences with MLEs in other countries and the features of the examinations proposed in Brazil to measure the aptitudes of newly qualified doctors. It is concluded that, in isolation, both alternatives are inadequate. We propose the development of a broader assessment program and stress the importance of collaboration between the different actors involved in order to enhance the quality of the examinations proposed to test the aptitude of newly qualified doctors in Brazil.(AU)

La sociedad brasileña ha discutido recientemente la idea de implementar un examen de licencia (ELM) para médicos recién graduados en el país. Para evaluar la adecuación de esta propuesta y su real necesidad, se analiza en este trabajo si los ELMs establecen eficazmente la aptitud de los recién graduados para ejercer la Medicina y si los sistemas de evaluación vigentes en la enseñanza médica brasileña ya lo hacen. Usando el modelo basado en competencias como factor referencial, se discute la experiencia de la comunidad internacional con los ELMs y las características de las evaluaciones que se proponen medir, en Brasil, la aptitud de los recién graduados. Se concluye que, aisladamente, ambas alternativas son ineficaces para cumplir ese objetivo. Se propone el desarrollo de un programa más amplio de evaluación y se enfatiza la importancia de la colaboración entre los actores envueltos para perfeccionar la calidad de las evaluaciones de los recién graduados en Brasil.(AU)

Teaching practice and thinking of the course of introduction to clinical medicine / 中华医学教育探索杂志

In Chongqing Medical University,Introduction to Clinical Medicinewas first launched in 2002. In this article, based on the summary of 2014 to 2015, we summarized respectively from teaching material construction, evaluation system with combination of formative assessment and summative assess-ment, network support platform, teaching quality monitoring system, and student questionnaire survey and evaluation. Through the study of the course, 99.5% (836/840) of the students think their team conscious-ness and cooperation ability were improved, 94.2% (791/840) of the students consider this course can im-prove their innovative ability of self-learning, 87.0% (731/840) of the students think it is beneficial to the improvement of their self expression ability and more than 78.0% of the students think they have achieved the goal of early clinical contact, expanding knowledge, and enhancing the basic professional quality.

The analysis on student assessment of outline of medical humanities course in military medical university / 中华医学教育探索杂志

ObjectiveTo improve the teaching quality of medical humanity education in medical university.MethodsA cluster sampling survey was given to 448 sophomores who studied the outline of medical humanities course in military medical university,and the data were descriptively and statistically analyzed.ResultsThe survey shows that 90％ sophomores satisfy with this course,95％ sophomores understand the importance of medical humanity education,and the students have more requirements on education resources and teaching ways.ConclusionOutline of medical humanities course is important to cultivate the medical humanity spirit of medical students,and the course still needs more improvements.

Comparative assessment of multiple choice questions versus short essay questions in pharmacology examinations.

This retrospective study compared the performance of medical students in multiple choice questions (MCQs) and short essay questions (SEQs). During the 3 year analysis, 533 students had an average score of 51.34% (SD 9.9) in the SEQ and 64.71%(SD 9.9)in the MCQs. Regression analysis showed a significant correlation(r=0.64, P<0.01) between MCQs and SEQs. When student performance was grouped by final course grade, a statistically significant correlation between MCQs and SEQs scores existed only for the 405 students who received a passing grade (r=0.21, P<0.01). The MCQ and SEQ scores were not correlated for the 128 students who failed (r=0.11, P=0.08) or for 70 students who achieved distinctions (r=-0.27, P=0.13). MCQ scores were significantly higher (P<0.01) than SEQ for each of the groups when analyzed by the two-way ANOVA test. The result of this study suggests that for most students, the strong correlation between MCQ and SEQ indicates that student performance was independent of testing format. For students at either end of the performance spectrum, the lack of correlation suggests that the performance in one of the testing format had a strong influence on the final course grade. In addition, those students who failed the course were likely to be weak in both testing modalities, whereas students in all grade groups were more likely to perform better in the MCQs than SEQs.