Efetividade da Avaliação Programática do Estudante de Medicina: Estudo de Caso Baseado nas Impressões de Estudantes e Professores de uma Escola Médica Britânica / Effectiveness of Medical Student Programmatic Assessment: A Case Study Based on Experiences of Students and Teachers from a British Medical School

RESUMO

RESUMO A avaliação programática do estudante é uma abordagem relativamente nova, que tem como objetivo principal o aperfeiçoamento das condições de utilização dos diferentes métodos de avaliação, com vistas ao melhor cumprimento das funções da avaliação somativa, formativa e controle da qualidade do currículo. A introdução de um sistema de avaliação programática do estudante em uma instituição do ensino superior constitui tarefa complexa e consumidora de recursos humanos e materiais, mas as informações sobre a efetividade desses sistemas são escassas. Embora a literatura especializada registre vários estudos sobre avaliação no ambiente de trabalho (estágios profissionalizantes e aperfeiçoamento profissional) em diferentes profissões da área da Saúde, são poucas as investigações sobre o tema em cursos de graduação em Medicina. Neste artigo, relata-se a experiência de uma escola médica britânica que adotou recentemente a avaliação programática. Trata-se de um estudo de caso baseado nas percepções de estudantes e professores, que concordaram em se submeter a entrevistas semiestruturadas gravadas. Os arquivos de áudio foram transcritos, fornecendo textos nos quais se realizou análise qualitativa de conteúdo. Essa análise produziu visões sobre pontos fortes do programa de avaliação e permitiu identificar aspectos que requerem aperfeiçoamento. Os resultados mostraram que, embora expressando diferentes perspectivas e criticando vários pontos da avaliação programática, estudantes e professores compartilham uma visão predominantemente positiva do programa de avaliação. Os estudantes valorizam muito a abundância de oportunidades de receber devolutivas construtivas, sobretudo nas atividades clínicas, bem como a realização periódica de exames estruturados de habilidades clínicas com finalidades somativa e formativa. Os professores valorizam muito a organização global do programa e a sua efetividade na detecção de estudantes com dificuldades. Valorizam, também, a diversidade de oportunidades de treinamento e desenvolvimento docente na temática da avaliação. Estes achados permitem concluir que estudantes e professores de Medicina, ainda que ressaltem a necessidade de aperfeiçoamentos, vêm tendo experiências predominantemente positivas de um sistema de avaliação programática recentemente introduzido na instituição. Assim, é possível inferir que a complexidade e os custos de implementação de um sistema de avaliação programática do estudante de Medicina podem ser compensados por seus efeitos positivos, como indicam as opiniões de estudantes e professores.

ABSTRACT

ABSTRACT Programmatic student assessment is a novel educational approach aiming at optimizing the utilization of different methods for better attaining the main functions of student assessment summative, formative and assurance of curriculum effectiveness (quality control of educational activities). Introduction of a programme for student assessment in institutions devoted to higher education in the health sciences professions isa time and resource consuming enterprise, which should be rewarded with gains in assessment quality. However, information on this is scarce. Although a few studies have yield data on various systems for work-based assessment in different health professions, the effectiveness of programmatic assessment in undergraduate settings has not been much evaluated. We therefore aimed at exploring the perceptions of selected samples of students and teachers from a single British medical school where a programmatic assessment system was recently introduced. In this case study, medical students and faculty members agreed to undergo a semi-structured, anonymously recorded interview. Audio-files were transcribed into texts, which were submitted to content analysis for identifying strengths and areas for improvement related to the current student programmatic assessment system. Our results showed that, although expressing different perspectives and criticizing a few aspects, students and teachers shared a predominant positive view on the local system for programmatic assessment. Students valued most the wealth of opportunities to receive constructive feedback from supervisors in clinical years and the multiple formative and summative objective structured exams of clinical skills. Teachers valued most the overall assessment organization and effectiveness in detecting poor performing students and praised the many training opportunities for them to be trained to play different roles in assessment. These findings allowed us to conclude that medical student and faculty experiences on a recently introduced system for programmatic assessment are predominantly positive. These results may be taken as an indication that complexity and costs associated to implementing such systems may be rewarded by improvements in student assessment overall quality.