Avaliação de larga escala e da aprendizagem na escola: um diálogo necessário / Large-scale assessment classroom and school: a necessary dialogue / Evaluación en larga escala y del aprendizaje en la escuela: un debate necesario

O artigo apresenta e discute o debate teórico acerca das aproximações e afastamentos das avaliações de larga escala e da aprendizagem na escola. Parte-se do pressuposto que a avaliação voltada aos processos educativos deve considerar as diferentes perspectivas que cada uma dessas dimensões avaliativas envolve. O texto assinala a importância da avaliação de larga escala como possibilidade de diagnóstico educacional, de orientação de políticas públicas e indica também que a avaliação da aprendizagem, no contexto da sala de aula, pode apresentar análises mais profundas e mais consequentes para as práticas pedagógicas. No entanto, as autoras, indicando as diferentes lógicas que cada uma dessas avaliações envolve, procuram afirmar a importância de se considerar metodologias, procedimentos diferenciados em sala de aula e não uma repetição das avaliações de larga escala, como usualmente vem acontecendo em nossas escolas. Partindo de uma perspectiva histórica dos modelos de avaliação educacional o texto debate as dimensões avaliativas e discute a importância de a escola promover um diálogo entre elas e não reduzir a avaliação da aprendizagem, no contexto da sala de aula, ao uso dos procedimentos e instrumentos da avaliação de larga escala.

The article presents and discusses the theoretical debate about the approaches and distancing of the large-scale and assessment of learning. It's assumed that the assessment focused on the educational processes must consider the different perspectives that each one of these evaluative dimensions involves. The text highlights the importance of large-scale assessment as a possibility of educational diagnosis and orientation of public policies, and also indicates that the evaluation of learning in the context of the classroom can present deeper and more consistent analyzes for pedagogical practices. However, the authors, indicating the different logics that each one of these evaluations must involve affirm the importance to consider methodologies, differentiated procedures in classroom and not a repetition of large-scale assessment, like it usually happens in our schools. From a historical perspective of the educational assessment models, the text debates the evaluative dimensions and discusses the importance of the school to promote a dialogue among them and not to reduce the learning assessment to the usage of the large-scale assessment procedures and instruments.

El artículo presenta y discute el debate teórico acerca de las aproximaciones y alejamientos de las evaluaciones de larga escala, de la escuela y aprendizaje. Se supone que la evaluación que busca a los procesos educativos debe considerar a las diferentes perspectivas que cada una de estas dimensiones envuelve. El texto señala la importancia de la evaluación de larga escala como posibilidad de diagnóstico educacional y de orientación de políticas públicas, e indica también que la evaluación del aprendizaje, en el contexto del aula, puede presentar análisis más profundas y más consecuentes para las prácticas pedagógicas. No obstante, las autoras indicando las diferentes lógicas que cada una de estas evaluaciones envuelve, buscan afirmar la importancia de considerar a metodologías, procedimientos diferenciados en aula de clase y no una repetición de las evaluaciones de larga escala, como generalmente ocurre en nuestras escuelas. Partiendo de una perspectiva histórica de los modelos de evaluación educacional, el texto debate las dimensiones evaluativas y discute la importancia de la escuela promover un dialogo entre ellas y no reducir la evaluación de aprendizaje en el contexto del aula, al uso de los procedimientos e instrumentos de la evaluación a gran escala.

18REST: a short RIASEC-interest measure for large-scale educational and vocational assessment

Abstract The construction of the 18REST, a short 18-item inventory to describe students' position on John Holland's RIASEC interest types, is documented. The instrument is meant to be used in large-scale assessment in education and on the labor market, supplementing information on school achievement and social-emotional skills. This research was carried out in Brazil, initially with two independent samples composed by adolescents and adults. The 18REST's psychometric properties are compared to those of the more extended RIASEC item pool and confirmed in a new independent undergraduate sample. Despite differences between genders were found as expected, invariance measurement across gender was indicated. Different ways to use the 18REST in large-scale assessment are discussed.

Desempenho no Enade de bolsistas ProUni: Modelagem de Equações Estruturais / ProUni Scholar students performance in Enade: Structural Equations Modeling

Resumo Esse estudo objetivou investigar o desempenho no Enade de estudantes bolsistas do Programa Universidade para Todos - ProUni da própria instituição e de estudantes com outros tipos de bolsas e, ainda investigar, por meio de Modelos de Equações Estruturais, se este desempenho se mantém para estudantes sob a condição de ingressantes e concluintes. Utilizou-se um banco de dados contendo os resultados de 401.117 estudantes que realizaram o exame do Enade em 2006, composto pelas provas de Formação Geral e de Conhecimento Específico. O mesmo modelo de equações estruturais foi utilizado para analisar os dados de estudantes ingressantes e concluintes. Os resultados obtidos indicaram que o modelo de mensuração dos estudantes bolsistas com relação às notas do Enade apresenta um ajuste razoavelmente bom e permite afirmar que o desempenho do estudante durante a graduação é inferior ao do momento de seu ingresso no Ensino Superior.(AU)

Abstract This study aimed to investigate the performance in the National Students Exam-Enade of students with scholarships ProUni ("University for all" Programme), with grants of the education institutions themselves and students with other types of scholarships, and also to investigate, through the Structural Equation Modeling, whether this performance is maintained under the conditions of freshmen and seniors. We used a database containing the results of 401,117 students who took the Enade exam in 2006, which is composed both of the General Formation and the Specific Knowledge tests. The same structural equation model was used to analyse the database of freshmen and seniors students. The obtained results indicated that the measurement model of the scholar students concerning the Enade grades provides a reasonably good fit and allows us to say that the student´s performance through graduation is poorer than the moment of their admission to College.(AU)

Equalização de provas acadêmicas via Teoria de Resposta ao Item / Equalization of academic tests via Item Response Theory / Ecualización de pruebas académicas vía Teoría de Respuesta al Ítem

Este estudo objetivou equalizar uma prova acadêmica de Pedagogia com o ENADE via Teoria de Resposta ao Item. Utilizou-se um banco de dados contendo informações de 49.497 estudantes de Pedagogia que realizaram o ENADE em 2005 e um banco de dados contendo informações de 260 estudantes de uma Instituição de Ensino Superior - IES que realizaram uma prova de Pedagogia de um Programa de Avaliação Discente - PAD. Os resultados apontaram que o desempenho dos estudantes concluintes da IES na prova PAD obteve notas médias percentílicas semelhantes ao desempenho dos estudantes com conceito 2 que realizaram o ENADE em 2005. Os concluintes da IES que realizaram o PAD alcançaram notas médias semelhantes às notas médias dos concluintes com conceito 4 que realizaram o ENADE. Este trabalho é um pequeno recorte alusivo às teorias e técnicas de análise de dados, com o intuito de colaborar com esse contexto de estudo ainda em construção.

This study aimed to equalize a Pedagogical academic test based on National Performance Student Exam via Item Response Theory. We used a database containing information of 49,497 Pedagogy students that took the exam in 2005 and another database containing information of 206 students of a higher education institution, who took a Pedagogy test of a Student Assessment Program - PAD. The results indicated that de senior students' performance of the higher educational institution in the PAD's test presented average percentilic grades similar to the student's performance with concept 2 who took the exam in 2005. The senior students of the higher educational institution who took the PAD's test reached average grades similar to the grade of the senior students who obtained concept 2 in 2005. This work is a small sample alluding to equalization theories and techniques in order to collaborate to this study context.

Este estudio objetivó ecualizar una prueba académica de Pedagogía con el ENADE vía Teoría de la Respuesta al Ítem. Se utilizó una base de datos que contiene información de 49.497 estudiantes de Pedagogía que realizaron el ENADE en 2005 y una base de datos de 260 estudiantes de una Institución de Educación Superior - IES que realizaron una prueba de un Programa de Evaluación Discente - PAD. Los resultados mostraron que el rendimiento de los estudiantes de final de carrera de la IES en la prueba PAD alcanzó calificaciones medias percentílicas semejantes al rendimiento de los Estudiantes con concepto 2 que realizaron el ENADE. Los estudiantes del final de carrera de la IES que realizaron la prueba PAD alcanzaron calificaciones medias semejantes a los estudiantes de final de carrera con concepto 4 en el ENADE. Este trabajo es un pequeño recorte alusivo sobre las teorías y las técnicas de análisis de datos, con el objetivo de colaborar con ese contexto de estudio aún en construcción.