Conceito global para alunos de medicina em estagio clinico comparação entre auto-avaliação, avaliação de docentes e pares / Global rating for medical students in clinical clerkship comparison between self, faculty and peer assessment

RESUMO

Objetivo: Relacionar o Conceito Global Itemizado com o Conceito Geral dos alunos do 4º ano de Medicina, atribuídos por três tipos de avaliadores (docentes, colegas e próprio aluno) e compará-lo com os outros métodos de avaliação das competências esperadas no atendimento em unidade de atenção primária. Sujeitos e métodos: Foram estudadas as notas atribuídas a estudantes do 4º ano (n=106), por docentes (n=19), pelos próprios alunos e por colegas, ao final de um módulo de ensino que se desenvolve em 6 unidades básicas de saúde, sob supervisão de docentes e tutores de Ginecologia e Obstetrícia (GO), Clínica Médica (CM) e Pediatria (Ped). Os docentes forneceram uma nota (0 a 10) que resumia as competências do aluno no semestre, cuja média foi definida como Conceito Geral (CG). Depois de duas semanas, os mesmos docentes preencheram o formulário pré-testado do Conceito Global Itemizado (CGI) para os mesmos alunos, que continha 6 domínios de competências técnicas (CGIt) e 7 de competências humanísticas (CGIh). Os alunos preencheram formulários iguais (de CG e de CGI) para realizar sua auto-avaliação e apenas a parte das competências humanísticas (CGIh) para anonimamente avaliar 3-4 colegas que compunham o seu grupo. Por meio de um instrumento auto-respondido, também expressaram sua opinião sobre o exercício de se auto-avaliar e de avaliar seus colegas. As notas de CGI foram comparadas com notas provindas de outros métodos de avaliação Provas Teóricas (Pt), Portfólio (Pf) e Avaliação Estruturada (AE). A análise estatística incluiu estatísticas descritivas, análise fatorial, coeficientes de Cronbach, testes de Friedman e de Wilcoxon para dados emparelhados, coeficientes de correlação de Pearson e de Spearman, modelos de análise de variância (ANOVA) e distâncias Euclidianas. Assumiu-se o nível de significância de 5%. Foi utilizado o programa SPSS Versão 10.0. O projeto foi aprovado pelo Comitê de Ética e Pesquisa da instituição...

ABSTRACT

Purpose: To correlate the Global Itemized Rating with the Global Overall Rating attributed to Y4 medical students by three types of assessors (faculty, peers and self), and to compare it with other assessment methods used to evaluate learners in clinical clerkship, at the primary level of care. Subjects and Methods: The focus of the present study were ratings attributed to Y4 medical students (n= 106) by faculty members (n= 19), by own students and peers, at the end of a teaching module conducted at 6 primary care centers, and supervised by faculties and tutors from Obstetric and Gynecology (O&G), Internal Medicine (IM) and Pediatrics (Ped). Faculties provided a summative global numeric rating, ranging from 0 to 10, which summarized student's competencies during the clerkship. Faculty global scores across disciplines were averaged and defined as a Global Overall Rating (GOR). Two weeks after securing GOR ratings for all students, the same faculty members assessed the same students using in a pre-tested Global Itemized Rating, named GIR, which encompassed thirteen domains six referred to technical skills (GIRt), and seven to humanistic skills (GIRh). Students completed similar GOR and GIR forms for self-assessment, and the humanistic scoring components of the GIR form to anonymously assess three to five working-group peers. Students answered a questionnaire on their perceptions to the experience as self and peer raters. GIR ratings were compared with ratings from other assessment methods: Multiple-choice questions (MCQs), Portfolio (Pf) and Real-case structured clinical assessment (RC-SCA). Statistical analyses included descriptive statistics, factor analysis, Cronbach's alpha, Friedman test, Wilcoxon signed rank test, Pearson and Spearman correlation coeffients, ANOVA models and Euclidean distances. Statistical significance was set at P<0.05. Statistical analyses were performed using SPSS program, version 10.0. Ethical approval was obtained...