Avaliação Critério-Referenciada em Medicina e Enfermagem: Diferentes Concepções de Docentes e Estudantes de uma Escola Pública de Saúde de Brasília, Brasil / Criterion-Referenced Measurement in Medicine and Nursery: Different Understandings of Teachers and Students at a Public College of Brasília, Brazil

RESUMO

RESUMO Introdução A avaliação critério-referenciada analisa o desempenho acadêmico sem comparar um estudante com outro, diferindo, assim, da avaliação normo-referenciada, que objetiva determinar os melhores e os piores desempenhos. A Escola Superior de Ciências da Saúde (ESCS) do Distrito Federal adota a avaliação critério-referenciada como único sistema avaliativo, buscando analisar o desempenho dos estudantes de forma integral e sem estimular a competitividade. Objetivo Analisar a concepção de docentes e estudantes de Medicina e Enfermagem acerca destes tipos avaliativos. Metodologia Estudo quali-quantitativo, descritivo, com delineamento transversal, por aplicação de questionários semiestruturados ao corpo acadêmico da primeira à quarta série da ESCS, realizado em 2013. Foram comparados estudantes, docentes e cursos utilizando-se o teste Qui-Quadrado. Resultados e Discussão Obteve-se uma amostra de 413 participantes (n = 55,9%), totalizando 54 docentes e 344 estudantes. Observou-se fragilidade do conceito de avaliação critério-referenciada em todo o corpo acadêmico e insatisfação quanto aos critérios avaliativos adotados na escola (323 ou 79,6%). Entre os motivos apontados, destacam-se a subjetividade na correção dos exames empregados e dificuldades ao concorrer em concursos de residência. Outros autores relatam que o método critério-referenciado tende a inflacionar as menções dos estudantes, embora os avalie de maneira mais integral. Por isso, recomendam a adoção dos sistemas critério e normo-referenciado para, respectivamente, aferir melhor o desempenho dos estudantes e compará-los entre si. Conclusão A comparação entre estudantes é necessária para processos seletivos dentro e fora da instituição de ensino superior estudada. Por isso, a avaliação critério-referenciada isoladamente não supre as necessidades desta instituição, gerando problemas durante e após a formação acadêmica. Diante disso, propõe-se a adoção de ambos os modelos (normo e critério-referenciado), com a aplicação de padrões de desempenho. Os instrumentos avaliativos também necessitam de critérios mais objetivos para uma correção de testes mais uniforme e justa. Para isso, propõe-se o incremento na capacitação dos docentes com discussões sobre a elaboração de instrumentos avaliativos, como a Teoria de Resposta ao Item.

ABSTRACT

ABSTRACT Introduction Criterion-referenced tests measure academic performance without comparing one student to another, therefore differing from the norm-referenced tests, which are designed to determine the highest and the lowest scores. The Escola Superior de Ciências da Saúde (ESCS) of Federal District, Brazil, uses criterion-referenced measurement as its only evaluative method, attempting to assess students in a more integrative way and to avoid stimulating competitiveness among students. Objective To analyze the interpretation students and teachers of Medicine and Nursery courses about this measurement. Material and Methods Cross-sectional, descriptive, quali-quantitative study, performed by application of semi-structured questionnaires to teachers and students from first to fourth year of Medicine and Nursery courses. We compared courses, students and professors using the Chi-Square test. Results and Discussion: The sample size was of 413 subjects (n = 55.9%), composing 54 teachers and 344 students. We observed fragility in the concept of criterion-referenced measurement, as well as dissatisfaction regarding the method of evaluation adopted by the Institution (323 or 79,6%). Most answers point subjectivity in the correction of exams and difficulties in competing for residency programs after graduation as the major problems. Other authors state that criterion-referenced measurement tends to inflate grades of students, although it also evaluates them in a more integrative way. They recommend the adoption of both measurements (criterion and norm-referenced) in order to respectively obtain best assessment and to compare students' performances. Conclusion Comparison of academic performance is necessary for selective processes inside and outside the studied institution. Therefore, criterion-referenced measurement alone cannot meet the needs of the institution, generating problems during and after graduation. We suggest the adoption of both methods (criterion and norm-referenced measurement) as well as the application of standard setting concepts for classification of students. Evaluative instruments also need objective criteria for correction of tests, in order to provide a uniform and fairer correction. For that, we propose an increase in teacher training by adding new discussions about elaboration of tests, like Item Response Theory.