Onze anos de Teste de Progresso na Unicamp: um estudo sobre a validade do teste / Eleven years of Progress Testing at Unicamp: a test validity study

Resumo: Introdução: O curso de Medicina da Universidade Estadual de Campinas (Unicamp) vem pondo à prova o aquisição cumulativa cognitiva de seus alunos por meio do Teste de Progresso (TP) há mais de uma década, de modo a possibilitar a análise da utilidade do exame como estratégia de apoio a decisões pedagógicas e apontar principais ameaças à validade dele. Objetivo: Este estudo teve como objetivos oferecer a análise de validade do TP e explicitar as oportunidades de utilização do teste especialmente para a determinação de padrões de suficiência cognitiva para a progressão no curso e ao final deste, e a identificação de estudantes em risco. Método: Trata-se de estudo observacional retrospectivo de uma série histórica de sucessivos testes escritos realizados para analisar o acúmulo cognitivo no período de 2006 a 2016, totalizando 11 anos e seis turmas consecutivas. Em cada momento de medida (aplicação do teste), o estudo utilizou um modelo misto, em que a exposição (realização do teste) e o desfecho (escore do teste) foram avaliados no mesmo ponto de tempo, o que caracteriza um estudo transversal (cross-sectional) cujos resultados sucessivos originarão as curvas de crescimento cognitivo Resultado: Observou-se um acúmulo cognitivo em torno de 6 pontos percentuais a cada nova testagem. Os estudantes ao completarem o sexto ano obtiveram um acerto de cerca de 65,7% (± 9,1). A cada testagem, determinou-se um "efeito piso" para identificar alunos com rendimento abaixo da média, que em geral se situou em cerca de 1,5 DP abaixo da média da respectiva turma. Conclusão: O TP-Unicamp oferece dados confiáveis para apoiar importantes decisões pedagógicas, tais como identificação de alunos em risco acadêmico por baixa performance, critérios para progressão e desempenho cognitivo ao final do curso. Como confiabilidade sofre influência da amostragem, e o aumento do número de itens de cada teste e o aumento da frequência de testagem podem ser estratégias a serem tomadas para superar essas limitações.

Abstract: Introduction: The Medical School of the State University of Campinas (UNICAMP) has been testing the cumulative cognitive acquisition among its students through the Progress Test (PT) for over a decade, making it possible to analyze the utility of the test as a strategy to support pedagogical decisions and to point out the main threats to its validity. Objective: To provide an analysis of the validity of the PT, explaining opportunities for its use, especially in determining standards of cognitive sufficiency for progression, standards of cognitive sufficiency at the end of the course, and identification of students at risk. Method: Retrospective observational study of historical series of successive written tests performed to analyze cognitive accumulation, covering a period from 2006 to 2016, totaling 11 years and 6 consecutive classes. At each instance of measurement (test application), the study uses a mixed model where exposure (test performance) and outcome (test score) are evaluated at the same time point, characterizing a cross-sectional study, the successive results of which will generate the cognitive growth curves. Result: A cognitive accumulation of around 6 percentage points was observed with each new test. Students, upon completing the 6th year, scored around 65.7% (± 9.1). A "floor effect" was determined for each test to identify students with below-average performance, which in general was about 1.5 SD below the average of the respective class. Conclusion: TP-Unicamp offers reliable data to support important pedagogical decisions, such as the identification of students at academic risk for low performance, criteria for progression and cognitive performance at the end of the course. As reliability is influenced by sampling, increasing the number of items in each test and increasing the frequency of tests could represent strategies to overcome potential limitations.

Changing Undergraduate Medical Students’ Perception of Online Learning and Assessment During the Covid-19 Pandemic: a One Year Follow-up Study

@#Introduction: Like most educational institutions, our medical school transitioned to online learning during the COVID-19 pandemic in March 2020. An initial survey of 192 undergraduate medical students conducted in June 2020 revealed a low acceptance of online assessments, lack of work-readiness, perception of online discussions as being inferior to face-to-face, and prevalent anxiety. Following this, we implemented pedagogic changes to encourage independent learning, improve patient contact, and increase social interactions between students. Methods: A follow-up study was conducted 12 months later in the same student population, excluding those who had graduated. The same 14-item anonymized survey questionnaire was administered, and comparisons were made between the follow-up and initial responses. Results: At follow-up, 45.6% of participants felt that online assessments can adequately and fairly assess students’ performance compared to the initial study (26.2%, p = 0.002). Participants at follow-up were generally more agreeable that discussion using an online learning platform was as effective as faceto-face learning compared to before (p = 0.017). Subgroup analysis showed that this was only true for Year 2 – 4 students. Year 5 students perceived online learning as less effective then face-to-face, reported lower confidence in their ability to apply their knowledge, and an increased in anxiety compared to before. Conclusion: While perception of online learning and assessment had improved at follow-up, the ramifications from restrictions to medical education over the past two years are now being felt most severely by the current final year students, emphasizing the importance of anticipating and addressing these concerns much earlier.

Nivel de dificultad y poder de discriminación del examen final de la asignatura Ontogenia Humana y SOMA / Difficulty level and discernment power on Human Ontogeny and SOMA final test subject

RESUMEN Fundamento: La calidad de los instrumentos evaluativos resulta esencial en el proceso de evaluación del aprendizaje. Objetivo: Determinar los índices de dificultad y discriminación del examen final ordinario de la asignatura Ontogenia Humana y Soma. Metodología: Se realizó un estudio retrospectivo transversal en la asignatura Ontogenia y SOMA, del curso 2017-2018 en la Universidad de Ciencias Médicas de Sancti Spíritus, en el que se procesaron 163 exámenes ordinarios finales, el 30 % de los examinados seleccionados mediante un muestreo aleatorio estratificado por grupos, se calcularon el índice de dificultad e índice de discriminación por preguntas, temas y ciencias. Resultados: El número de incisos esperados y reales, de acuerdo con las horas clases para cada ciencia estuvo ajustado, no así en las temáticas Ontogenia de 17 incisos esperados se dedicaron 12 (70.5 %), en SOMA de 34 incisos esperados se dedicaron 29 (85.2 %); el índice de dificultad por temáticas, ciencias y temarios fue medianamente fácil (0.74-0.86) al igual que para el examen en su conjunto. El índice de discriminación del tema Ontogenia fue superior en el temario 1 (T1: 0.37 vs. T2: 0.24) y similar en SOMA (T1: 0.40 vs. T2: 0.39) y a nivel de las ciencias [Embriología (T1: 0.39 vs. T2: 0.31), Anatomía (T1: 0.39 vs. T2: 0.37)]. A nivel de preguntas, el índice de discriminación más bajo lo tuvo la pregunta 1 del primer temario (0.22), el resto tuvo índices de discriminación superiores a 0.30. Conclusiones: Ambos temarios tienen un índice de discriminación similar. El índice de dificultad fue medianamente fácil.

ABSTRACT Background: The quality of the assessment instruments is essential in the learning assessment process. Objective: To determine the difficulty and discernment indexes of the Human Ontogeny and SOMA ordinary final test subject. Methodology: A cross-sectional retrospective study was conducted on the Ontogeny and SOMA subject, from 2017 to 2018 academic year at the Sancti Spíritus Faculty of Medical Sciences, 163 final ordinary tests were processed, 30 % of the examinees selected by stratified random cluster sampling, the difficulty and discernment index were calculated by questions, topics and sciences. Results: The number of expected and real items, according to the class hours for each science, was adjusted, but not in the subjects (Ontogeny of 17 expected items were dedicated 12 (70.5 %), in SOMA of 34 expected items 29 were dedicated (85.2 %), the difficulty index by subjects, sciences and syllabus was moderately easy (0.74-0.86) as for the exam as a whole. The discernment index of the topic Ontogeny was higher in the syllabus 1 (T1: 0.37 vs. T2: 0.24) and similar in SOMA (T1: 0.40 vs. T2: 0.39) and [Embryology (T1: 0.39 vs. T2: 0.31), Anatomy (T1: 0.39 vs. T2: 0.37)]. At the science level questions, the lowest discernment index was found in question 1 from the first syllabus (0.22), the rest had discernment indexes higher than 0.30. Conclusions: Both topics have a similar discernment index. The difficulty index was moderately easy.

Consideraciones didácticas para evaluar el aprendizaje de las habilidades clínicas en Propedéutica clínica / Didactic considerations to evaluate the learning of clinical skills in Clinical Propaedeutic

Introducción: Evaluar el desarrollo cognitivo y procedimental del estudiante en la ejecución de las habilidades clínicas, es objetivo de la Propedéutica clínica. La mayoría de los estudiantes tienen dificultades al ejecutar estas habilidades, insuficiencias que se relacionan con la poca frecuencia que son evaluadas en la práctica y la preparación didáctica de los profesores asistenciales para realizar una evaluación sistemática. Objetivo: Profundizar en el estudio de la evaluación como proceso, a partir del análisis actualizado de los elementos que la componen. Métodos: Se realizó una revisión de documentos académicos que orientan la enseñanza en Propedéutica clínica y búsqueda en internet mediante Google académico con las siguientes palabras clave y sus combinaciones: evaluación, evaluación del aprendizaje, habilidades clínicas, formación médica, didáctica y propedéutica clínica. Desarrollo: La evaluación como proceso se manifiesta consustancial a la enseñanza, la acompaña, se pone al servicio de esta y valida la formación profesional que se desea. Para lograr el desarrollo de las habilidades clínicas en los estudiantes, los profesores deben apropiarse de conocimientos y herramientas didácticas que le permitan ejecutar un proceso evaluativo objetivo, coherente, sistemático, participativo y desarrollador, en las condiciones pedagógicas en que se produce la formación del médico. Conclusiones: Alcanzar calidad en la evaluación, demanda de la preparación didáctica de los profesores asistenciales, para que desde una concepción integradora puedan utilizarla en sus funciones formativa educativa y reguladora del proceso de enseñanza(AU)

Introduction: To evaluate the cognitive and procedural development of the student in the execution of the clinical skills, is the objective of the clinical Propaedeutics. The majority of students have difficulty in executing these skills, inadequacies that are related to the infrequency that are evaluated in practice and the didactic preparation of the teaching assistants to perform a systematic evaluation. Objective: To deepen the study of evaluation as a process, based on the updated analysis of the elements that comprise it. Methods: A review was made of academic documents that guide teaching in clinical Propaedeutics and Internet search using Google academic with the following keywords and their combinations: evaluation, evaluation of learning, clinical skills, medical training, didactic and clinical propaedeutics. Development: Evaluation as a process is manifested in the teaching, accompanies it, puts itself at the service of it and validates the professional training that is desired. To achieve the development of clinical skills in students, lecturers must own themselves knowledge and teaching tools that allow them to execute an objective, coherent, systematic, participatory and developing evaluation process, under the pedagogical conditions in which the physician's training takes place. Conclusions: To achieve quality in the evaluation, demand for the didactic preparation of the lecturers in health care, so that from an integrating conception they can use it in their educational and regulatory training functions of the teaching process(AU)

A Avaliação da Aprendizagem no Contexto da Justiça Educativa para População com Deficiência na Educação Superior / Learning Assessment in the Educational Justice Context for the Population with Disability in Higher Education

RESUMO a Instituição Universitária Tecnológico de Antioquia, localizada na Colômbia, tem possibilitado o acesso a seus programas acadêmicos sem restrições aos estudantes com deficiência. Uma questão recorrente nesse processo por parte dos docentes tem sido a avaliação da aprendizagem desses estudantes. O diálogo com os professores possibilitou compreender que eles desconheciam como agir com a valorização da aprendizagem por não conhecerem as capacidades e as habilidades dos alunos com deficiência, levando-os a atribuir uma avaliação subjetiva nos cursos. De igual modo, os docentes questionavam o seu próprio desempenho no campo laboral, uma vez graduados, pois tais situações demostraram que as práticas de avaliação seguem sendo hegemônicas. Esses fatos motivaram a realização da pesquisa Análise da avaliação da aprendizagem em estudantes com deficiência participantes em diferentes programas acadêmicos. A metodologia hermenêutica-fenomenológica foi usada com o propósito de caracterizar a avaliação da aprendizagem que realizam os docentes em diferentes programas acadêmicos para estudantes com deficiência. Participaram da pesquisa 5 estudantes, sendo: um estudante com autismo, um surdo, dois com deficiência cognitiva e um com paralisia cerebral, com comprometimento na mobilidade e na comunicação verbal, e 78 docentes de diferentes programas acadêmicos. Os resultados apontam que a avaliação é uma oportunidade educativa para a participação, a qual deve ser efetuada no contexto da justiça educativa, de forma a transcender conhecimentos declarativos, dar abertura à reflexão do estudante sobre a ação e integrar os princípios do desenho universal da aprendizagem e o enfoque da aprendizagem situada.

ABSTRACT: The Tecnológico de Antioquia - University Institute, located in Colombia, has enabled access to its academic programmes without any restrictions to students with disabilities. A recurring issue in this process on the part of the professors has been the evaluation of the learning of these students. The dialogue with the professors has helped to understand that they did not know how to act with valorization learning due to the lack of knowledge in relation to the skills and abilities of students with disabilities, leading them to attribute a subjective assessment in the courses. In the same way, professors questioned their own performance in their field of work, once the students were graduated, because such situations demonstrated that the evaluation practices continue to be hegemonic. These facts gave motivation to undertake the research learning assessment analysis in students with disabilities who participate in different academic programmes. The hermeneutic phenomenological methodology was used with the aim of characterizing the learning assessment that professors carry out in different academic programs for students with disabilities. Five students participated in the study: one student with autism, one deaf, two with cognitive impairment and one with cerebral palsy, with impairment in mobility and verbal communication, and 78 professors from different academic programs. Results point out that the assessment is an educational opportunity for participation, which must be carried out in the context of educational justice, in order to transcend declarative knowledge, evoke student's reflection on the action and integrate the principles of the universal design of learning and the situated learning approach.

A organização curricular e a avaliação da aprendizagem como dispositivos pedagógicos: uma experiência em EJA / The curriculum organization and assessment as pedagogical devices: an experience with adult education / Organización del currículo y evaluación del aprendizaje como dispositivos pedagógicos: una experiencia en la educación de jóvenes y adultos

Este artigo problematiza os efeitos provocados pela integração curricular e pela alteração das formas de avaliar a aprendizagem nas práticas pedagógicas cotidianas e no modo de subjetivação de professores da educação de jovens e adultos (EJA) de uma escola pública federal. Com base na revisão da literatura sobre o tema, na participação efetiva nos espaços coletivos de discussão e no relato da experiência dos educadores, descreve as dificuldades e as resistências surgidas durante tal processo. Destaca o papel do currículo integrado e da avaliação da aprendizagem como dispositivos pedagógicos, permitindo colocar em discussão as relações e as práticas instituídas. Conclui apontando a importância de se criarem condições de possibilidade para que tanto professores quanto alunos discutam as relações e as práticas assumidas como naturais à educação, com vistas a instaurar fazeres pedagógicos instituintes e que potencializem as discussões, favorecendo o surgimento de estratégias educacionais implicadas com a transformação social

This article discusses the effects caused on everyday teaching practices and on the subjectification of teachers of adult and young learners education in a federal public school with integrated curriculum and changes on the assessment process. Based on literature reviewed, effective participation in collective spaces for discussion and reporting of educators experience, describes the difficulties and resistances that arise during this process. It also highlights the role of the integrated curriculum and learning assessment as pedagogical devices. It emphasizes the importance of creating conditions of possibility for both teachers and students to discuss the relationships and practices assumed as natural to education, it enhances the discussions, by favoring the emergence of educational strategies involved with social transformation

Este artículo aborda los efectos causados por la integración curricular y por la alteración de las formas de evaluar el aprendizaje en las prácticas pedagógicas cotidianas y en el modo de subjetivación de profesores de EJA (educación de jóvenes y adultos) de una escuela pública federal. Con base en la revisión de la literatura sobre el tema, en la participación efectiva en los espacios colectivos de discusión y en el relato de la experiencia de los educadores, describe las dificultades y resistencias que surgen durante este proceso. Pone de relieve el papel del currículo integrado y evaluación del aprendizaje como dispositivos pedagógicos que permiten analizar las relaciones y prácticas instituidas. Concluye destacando la importancia de crear condiciones de posibilidad para que los profesores y los alumnos discutan las relaciones y las prácticas asumidas como naturales de la educación, con el fin de ampliar las discusiones, favoreciendo la aparición de estrategias educativas implicadas con la transformación social.

Escritura multimodal digital, formas alternativas de comunicación y su incidencia en el aprendizaje de estudiantes de Educación Básica Primaria

Introducción. Las tecnologías comunicacionales han facilitado la utilización de recursos adicionales al texto alfabético y la imagen. En la actualidad es posible usar el audio, el vídeo, el tacto y los gestos, como elementos que comunican y dan sentido completo a un texto, llevando a reconocer cada vez más la importancia de la escritura multimodal en los procesos de aprendizaje. Objetivo. Describir los efectos que tienen las prácticas de escritura multimodal digital en el aprendizaje, y de los formatos digitales que permiten comunicar, representar e interpretar el conocimiento en los textos producidos por los estudiantes, más allá de la escritura alfabética convencional. Materiales y método. Este estudio tiene un carácter exploratorio. Participaron ciento veintitrés (123) estudiantes de 5° de Educación Básica Primaria, quienes realizaron actividades de escritura durante veinte semanas equivalentes a dos períodos académicos del año escolar. Se utilizó, entre otros instrumentos, una escala de aprendizaje, de la cual se derivan los resultados objeto de análisis en este artículo. Resultados. Los resultados evidencian que la escritura de textos multimodales contribuye al aprendizaje de los estudiantes, relacionado con la concepción de escritura, el proceso de composición y la relación con otras áreas curriculares. Conclusión. Una perspectiva pedagógica sobre los procesos de composición mediados por aplicaciones y/o dispositivos informáticos puede potenciar en los estudiantes habilidades que superan orientaciones técnicas, involucrando factores cognitivos, lingüísticos y comunicativos que le dan mayor sentido al trabajo académico en entornos digitales.

Introduction. Communication technologies have made the use of resources additional to alphabetic text and images, easier. Nowadays, it is possible to use audio, video, touch and gestures as elements that communicate and give a whole sense to a text, leading to a greater acknowledgement of multimodal writing´s importance in learning processes. Objective. To describe the effects of multimodal practices on learning and also the effects of the digital formats that allow communication, representation and interpretation of knowledge in the texts produced by students, beyond conventional alphabetic writing. Materials and methods. This study has an exploratory character. 123 fifth grade students participated, developing writing activities in a 20 weeks period, two periods of the school year. Among other instruments, a learning scale was used and the results analyzed here are derived from it. Results. The results obtained demonstrated that writing multimodal texts contributes to the students´ learning about the conception of writing and the relationship with other curricular areas. Conclusion. A pedagogical perspective about the composition processes mediated by IT applications and/or devices can potentiate skills beyond technical orientations in students, involving cognitive, linguistic and communicative factors that give more sense to the academic work within digital environments.

Introdução. As tecnologias comunicacionais hão facilitado a utilização de recursos adicionais ao texto alfabético e a imagem. Na atualidade é possível usar o áudio, o vídeo, o tacto e os gestos, como elementos que comunicam e dão sentido completo a um texto, levando a reconhecer cada vez mais a importância da escritura multimodal nos processos de aprendizagem. Objetivo. Descrever os efeitos que têm as práticas de escritura multimodal digital na aprendizagem, e dos formatos digitais que permitem comunicar, representar e interpretar o conhecimento nos textos produzidos pelos estudantes, além da escritura alfabética convencional. Materiais e método. Este estudo tem um carácter exploratório. Participaram cento vinte e três (123) estudantes de 5° de Educação Básica Primaria, quem realizaram atividades de escritura durante vinte semanas equivalentes a dois períodos acadêmicos do ano escolar. Se utilizou, entre outros instrumentos, uma escala de aprendizagem, da qual se derivam os resultados objeto de análise neste artigo. Resultados. Os resultados evidenciam que a escritura de textos multimodais contribui à aprendizagem dos estudantes, relacionado com a concepção de escritura, o processo de composição e a relação com outras áreas curriculares. Conclusão. Uma perspectiva pedagógica sobre os processos de composição mediados por aplicações e/ou dispositivos informáticos pode potenciar nos estudantes habilidades que superam orientações técnicas, envolvendo fatores cognitivos, linguísticos e comunicativos que dão maior sentido ao trabalho acadêmico em entornos digitais.

Learning method of self-evaluation and mutual-evaluation for practical teaching ofcurriculum:application and exploration / 中国针灸

The application and significance of learning method of self-evaluation and mutual-evaluation for practical teaching ofcurriculum were investigated. The practical teaching followed theory teaching in the curriculum plan, which applied grouping pattern to provide demonstration, practice and assessment. According to the technique points of practical teaching, the teachers established evaluation form and listed detailed points of self-evaluation and mutual evaluation. The focus was student assessment, including individual self-evaluation, subject-evaluation intra-group evaluation, external-group evaluation and teacher evaluation. 100 points were taken as maximum score, including 10 points in the self-evaluation from operator, 20 points in the evaluation from receiver, 20 points in the intra-group evaluation, 20 points in external-group evaluation and 30 points in teacher evaluation. Through practical application, it was found learning system of self-evaluation and mutual-evaluation had important significance in promoting mutual learning among students, improving students' learning enthusiasm and initiative, and helping teachers understand and improve their roles.

Hacia una concepción desarrolladora en la calidad de la evaluación del aprendizaje. Propuesta de Manual / Towards a developing conception in the quality of learning assessment. A booklet proposal

Las actuales demandas de la educación superior precisan de enseñar a pensar a los estudiantes, lo que transforma la toma de decisiones pedagógicas en los profesores. Se realizó una investigación en el Politécnico de la Salud villaclareño, donde se caracterizó el acontecer de las prácticas evaluativas de los docentes y su influencia en el aprendizaje y desarrollo personal de los estudiantes, lo que sirvió de base en la elaboración de un manual para transformar las prácticas evaluativas de los profesores, con un contenido teórico actualizado y didáctico que incluye actividades prácticas que permiten la reflexión, el autodidactismo, autoevaluación y su utilización en actividades metodológicas en diferentes carreras y departamentos de la Facultad, motivándolos a modificar sus prácticas evaluativas. Este documento ha sido socializado en actividades metodológicas y eventos a diferentes niveles y escenarios de la educación superior.

The current demands of the higher education need to teach the students to think, which make transformations in the pedagogical decision taking on the part of the professors. A research work was carried out in the health Technology faculty in Villa Clara, where the professor's assessment activities were characterized and the learning and personal development of the students as well. On these bases a booklet was elaborated to transform the assessment practices of the professors, having updated theoretical and didactic contents which allow a reflexive knowledge, self-learning, self-evaluation and its usage in methodological activities in different departments and careers of the faculty, motivating them to modify their assessment practices. This document has been discussed in methodological activities and events at different levels and scenarios of the higher education.

Formação básica e profissional do psicólogo: análise do desempenho dos estudantes no ENADE-2006 / Psychologist´s basic and professional education: analysis of students´ performance in the 2006

São analisados resultados obtidos pelos estudantes ingressantes e concluintes que realizaram o ENADE-2006-Psicologia quanto a dados Socioeconômicos, de História Escolar e Componentes Específicos do conhecimento psicológico. Identificou-se que os estudantes são, em sua maioria, provenientes do ensino privado e apresentam diferenças de desempenho quando comparados aos provenientes do público. Os dados socioeconômicos também são analisados em comparação com escores obtidos no Exame e são tecidas considerações sobre os resultados em termos de conhecimentos gerais e específicos. São observadas as orientações das Diretrizes Curriculares Nacionais para os cursos de graduação em Psicologia, em comparação com os escores obtidos em aspectos específicos da prova. Observa-se que a maioria dos alunos é do sexo feminino, os desempenhos são melhores no ensino público, diurno. Uma das constatações é a necessidade de maior investimento na formação quanto aos conteúdos referentes a Investigações e Medidas, bem como em Fundamentos Históricos e Epistemológicos.

We analyze the results obtained by first year and graduating students who took the 2006 ENADE Exam in Psychology. We study the outcome relating to Socio-Economic data, School history and Specific Components of psychological knowledge. It is possible to conclude that the students who took the test come mostly from the private education and show differences in performance when compared to those who attended in public. The socio-economic data are analyzed in comparison with the scores obtained in the examination in terms of specific and general knowledge. The orientation of the National Curriculum Guidelines for undergraduate courses in Psychology was compared with the scores obtained in specific aspects of the exam. Most students are female, the performances are better in public education, during the day. We point out for the need for greater investment in training relating to the contents for Investigations and Measures, historical and epistemological basics in Psychology.

Formação básica e profissional do psicólogo: uma análise do desempenho das IES no ENADE-2006 / Basic Training and professional psychologist: an analysis of high education in ENADE-2006

O objetivo do artigo é analisar a formação em psicologia oferecida pelas Instituições de Ensino Superior brasileiras, por meio do desempenho no Exame Nacional de Desempenho Educacional 2006, que compara grupos de ingressantes e de concluintes. São analisados os indicadores do desempenho geral e os relativos aos componentes específicos da prova do ENADE de 2006 explorando-se, sobretudo, a sua variabilidade considerando-se o tipo e a natureza da instituição formadora. Exploram-se também as inter-relações entre a formação na graduação e a pós-graduação, destacando haver forte associação entre a qualidade do desempenho no ENADE e a presença de programa de pós-graduação na IES. Os resultados gerais indicam que as IES públicas (federais e estaduais) apresentam desempenho superior em relação às instituições públicas municipais e particulares. São analisadas as implicações desses resultados para a formação em psicologia no Brasil.

Were analyzed undergraduate psychology programs offered by higher education institutions in Brazil, through performance on the National Educational Performance Test (ENADE) of 2006, which compares groups of incoming freshmen and graduating seniors. Indicators of overall performance and data on specific components of the 2006 ENADE test are analyzed, probing especially into their variability considering the type and nature of the educational institution. The interrelationships between undergraduate and graduate education are also studied, noting there is a strong association between quality of performance on the ENADE test and the presence of a postgraduate program at the higher education institution. General results indicate that public (federal and state) present superior performance in relation to municipal and private institutions. The implications of these findings for psychology degree programs in Brazil are analyzed.

Nivel de dificultad y poder de discriminación del examen diagnóstico de la asignatura Morfofisiología Humana I / Level of difficulties and discriminatory power in the diagnostic test of Human Morphophysiology I subject

El objetivo de este trabajo es identificar el nivel de dificultad y poder de discriminación del examen diagnóstico de la asignatura Morfofisiología Humana I, del Nuevo Programa de Formación de Médicos en la Facultad-Policlínico Félix Edén Aguada, de Cienfuegos, Cuba. Para ello se calcularon los índices de dificultad y de discriminación, así como el coeficiente de discriminación a la totalidad de los 421 exámenes diagnósticos aplicados de la asignatura de Morfofisiología Humana I. Se entrevistaron profesores como informantes clave y estudiantes destacados. Todas las preguntas dieron la posibilidad de discriminar y predecir. De ellas, dos presentaron un índice de dificultad media, otras dos fueron medianamente fáciles y solo una fue altamente fácil. Se identificó el nivel dificultad y el poder de discriminación de cada pregunta del examen diagnóstico de Morfofisiología Humana I, lo que permitió plantear que el instrumento aplicado, fundamentalmente osciló entre dificultad media y medianamente fácil, con adecuado poder de discriminación. Los profesores y estudiantes reconocen la necesidad de estos exámenes para corregir dificultades en la evaluación, mejorar el trabajo metodológico y reajustar la autopreparación. Se hacen conclusiones.

The objective of this paper is to identify the level of difficulties and the discriminatory power of the diagnostic test of Human Morphophysiological I included in the New Medical Formation Program that is implemented in Felix Edén Aguada teaching polyclinics located in Cienfuegos province, Cuba. To this end, the difficulty and discrimination indexes were estimated together with the discriminatory coefficient of the 421 diagnostic tests of the above-mentioned subject. The professors as key informants and outstanding students were interviewed. All the questions made it possible to discriminate and to predict. Of these, two showed a mean difficulty index, other two were fairly easy and just one was very easy. The level of difficulties and the discriminatory power of each question of the exam were established, which allowed stating that the applied instrument ranged from mean difficulty to moderately easy, with suitable discriminatory power. The professors and the students agreed that these exams were necessary to overcome difficulties in the evaluation process, to improve the methodological work and to re-adjust self-preparation. The conclusions were also submitted.

Mapas conceituais: estratégia de ensino/aprendizagem e ferramenta avaliativa / Conceptual maps: teaching and learning strategies and an evaluative tool

O presente ensaio tem por objetivo apresentar uma reflexão sobre as potencia lidades do mapa conceitual como estratégia de ensino/aprendizagem e ferramenta ava liativa. Revisitar o referencial teórico relativo à temática possibilitou contemplar a utili dade do mapa conceitual sob diferentes perspectivas: daquele que ensina e daquele que aprende. Valer-se dos mapas conceituais como estratégias de ensino/aprendizagem, também e concomitantemente como ferramenta avaliativa, é criar possibilidades para a organiza ção do conhecimento pela promoção de experiências educativas que provoquem não somen te reflexão, busca de compreensão e processamento profundo da informação, mas tam bém o desenvolvimento da autorregulação, da metacognição e do aprender a aprender.

This essay has the purpose of reflecting upon the potential benefits of con ceptual map as teaching and learning strategies and an evaluative tool. To revisit the the oretical framework of this theme made it possible to analyze the utility of conceptual map under different perspectives: the teachers´ and the students´. It became clear that the use of conceptual map as teaching and learning strategies, as well as an evaluative tool, leads to knowledge organization by means of promotion of learning experiences which not only generate reflection, comprehension and deep processing of information, but also contributes to the development of metacognition, self-regulation and learning to learn processes.

Avaliação da aprendizagem na educação profissional: um estudo da escola técnica do SUS Profa. Ena de Araújo Galvão / Assessment of learning in professional education: a study of the technical school SUS Prof. Ena de Araujo Galvão

Este estudo analisa os processos (modelos e práticas) de avaliação da aprendizagem na Escola Técnica do SUS- ETSUS “Profª. Ena de Araújo Galvão”, uma instituição vinculada à Secretaria de Saúde do estado de Mato Grosso do Sul e que tem como missão a formação e qualificação de trabalhadores de nível médio do Sistema Único de Saúde (SUS). Foram utilizadas as seguintes fontes de informação: a) projetos dos cursos técnicos (Técnico em Enfermagem, Técnico em Higiene Dental, Técnico em Radiologia, Técnico em Hemoterapia); b) planos de ensino ou programas das disciplinas; c) instrumentos de avaliação utilizados pelos professores; d) questionário; e) entrevistas semi-estruturadas. O objetivo desse estudo é refletir sobre os processos de avaliação praticados na ETSUS “Profª. Ena de Araújo Galvão”, considerando os relatos dos professores acerca dessas práticas avaliativas, a coerência desses relatos com os planos de ensino ou programas das disciplinas e os projetos dos cursos técnicos, tendo em vista alguns modelos (formativo e tradicional) de avaliação trabalhados por teóricos da educação. Pelos resultados obtidos, pode-se considerar que a ETSUS “Profª Ena de Araújo Galvão” está passando por um processo de transição quanto ao modelo de avaliação da aprendizagem praticado.

This study analyses the records (samples and practices) of learning assessment at Escola Tecnica do SUS – ETSUS “Prof . Ena de Araujo Galvao”, an institution linked to the Health Department of Mato Grosso do Sul that has as its mission the training and qualification of workers from the intermediate level of the Sistema Único de Saude (SUS). The following sources of information were used for this study: a) records from these technical courses (Nursing technician, Dental Hygienist technician, Radiology technician, Hemotherapy technician ); b) teaching plans or the program of the subjects studied; c) instruments used by the teachers to assess the students; d) questionnaires; e) semi-structured interviews. This study intended to reflect upon the assessment methods applied at ETSUS “Prof Ena de Araujo Galvao”, taking into consideration the reports from the teachers about these methods, the consistency of these reports in relation to the teaching plans or program of the subjects and the records from the technical courses, having in mind some records samples (formative and traditional) of assessment used by theoreticians of education. Based on the results obtained, it was possible to realize that ETSUS “Prof. Ena de Araujo Galvao” is going through a process of transition regarding the method of learning assessment applied.