Efecto de una capacitación sobre los puntajes de la prueba de admisión de la Universidad de Costa Rica: una aproximación bayesiana

Se usó un diseño cuasi-experimental con pre y post-test para estimar el efecto de una capacitación para la prueba de admisión de la Universidad Costa Rica, un test estandarizado que mide habilidades de razonamiento en contextos verbales y matemáticos. Cuatro colegios públicos del área metropolitana central del país participaron en el estudio, asignándose dos de ellos aleatoriamente al grupo de intervención y los otros dos al grupo de control, con 61 estudiantes en el primer grupo y 80 en el segundo. La intervención consistió de 5 sesiones de capacitación de 3 horas, utilizando como guía un manual desarrollado por una experta pedagoga, con enfoque constructivista. Las medidas antes y después fueron formas reducidas de la prueba de admisión 2014. La variable dependiente fue la diferencia entre ambas mediciones. El efecto de la capacitación fue de 3.5 puntos porcentuales y significativo, y se estimó utilizando un modelo bayesiano de regresión multinivel.

A quasi-experimental design with pre and post- test was used to estimate training effects for the University of Costa Rica's admission test, a standardized exam that measures reasoning abilities in mathematical and verbal contexts. Four secondary public schools from the metropolitan central area of the country participated in the study; two of them were randomly assigned to the intervention group and the other two to the control group, with 61 students in the first group and 80 in the second. The intervention consisted of five three-hour training sessions, using a written guide developed by a pedagogy expert with a constructivist approach. Before and after measures were reduced test forms of the real admission test from the year 2014. The dependent variable was the difference between the two measures. The effect of the training was estimated using a multilevel Bayesian regression model with a significant magnitude of 3.5 percentage points.

Variáveis do contexto escolar como preditoras da autoeficácia e ansiedade de estudantes / School context variables as predictors of self-efficacy and anxiety of students / Variables de contexto escolar como predictores de la autoeficacia y la ansiedad de los estudiantes

A ampliação das políticas públicas de avaliação educacional em larga escala trouxe atenção ao papel dos aspectos econômicos, sociais e psicológicos ligados ao desempenho escolar dos estudantes. O presente estudo investigou a associação entre as variáveis socioemocionais ansiedade e autoeficácia com as variáveis sociodemográficas e do contexto escolar no 5º e 9º ano do ensino fundamental e do 3º ano do ensino médio da rede pública do estado de Minas Gerais. Utilizou-se o método de modelagem multinível em cada ano escolar, e os resultados indicaram que as variáveis do contexto escolar influenciam a expressão da ansiedade e das crenças de autoeficácia dos estudantes. Concluiu-se que intervenções individuais e de organização do espaço escolar podem contribuir para a construção de um espaço propício para a aprendizagem e para a melhoria da equidade...

The expansion of public policies of large scale assessment in Education has brought attention to the economic, social and psychological aspects associated with students’ school performance. This study investigated the association between sociodemographic variables and the noncognitive variables of socio-emotional anxiety and self-efficacy, and of the school context in the 5th and 9th grades of elementary school and the 3rd year of secondary education in public schools in the state of Minas Gerais. We used the hierarchical multilevel modeling method in each grade, and the results indicated that the variables of school context affect the expression of selfefficacy beliefs and students anxiety. The results show that individual interventions and the school environment organization could contribute to providing a more suitable learning environment and to improve equity...

Con la expansión de las políticas públicas de evaluación en gran escala en el área de la educación se ha dado atención a las esferas económica y social y los aspectos psicológicos relacionados con el desempeño escolar de los estudiantes. El presente estudio investigó la asociación entre las variables no-cognitivas ansiedad y la auto-eficacia con variables de contexto escolar en el 5º y 9º grado de la escuela primaria, y 3o grado de la escuela secundaria de las escuelas públicas del estado de Minas Gerais. Lo hicimos con el método de la modelación multinivel en cada una de las categorías y los resultados indican que las variables de contexto escolar afecta a la expresión de la auto-eficacia y ansiedad en los estudiantes. Los resultados muestran que las intervenciones individuales y la organización de entorno escolar podrían contribuir a proporcionar un ambiente de aprendizaje más adecuado y mejorar la equidad...

Análise multinível: contribuições para estudos sobre efeito do contexto social no comportamento individual / MuMultilevel analysis: contributions to studies investigating the effects of social context on individual behaviorltilevel analysis: contributions to studies investigating the effects of social context on individual behavior

O reconhecimento da influência do contexto social no comportamento humano destaca a necessidade de adoção de modelos explicativos que favoreçam a identificação desse efeito. Este artigo tem o objetivo de apresentar as características teóricas e técnicas dos modelos multinível, pois eles cumprem com essa exigência. Em uma perspectiva teórica, a escolha dos modelos em discussão deveria ser baseada, tanto quanto possível, em uma teoria multinível que evidenciasse o papel preditivo de variáveis oriundas de diferentes níveis. A construção de modelos guiada por uma teoria levará a modelos mais frutíferos e com maior validade externa, em comparação com modelos construídos com pouco ou nenhum sustento teórico. Do ponto de vista técnico, a análise multinível é similar à análise de regressão; assim, obedece a muitas das suas exigências. Este trabalho permite concluir sobre as vantagens dos modelos multinível para pesquisadores interessados na identificação do efeito do contexto no comportamento humano.

The recognition of the influence of social context on human behavior emphasizes the need for models that allow for the identification of this effect. The theoretical and technical characteristics of multilevel models are presented here, since they satisfy this requirement. From a theoretical perspective, it is worthwhile highlighting that the choice of a multilevel model should be founded, as much as possible, on a multilevel theory that points to the predictive role of variables originating from different levels. The construction of multilevel models guided by theory will result in more fruitful models with higher external validity in comparison with models built with little or no theoretical foundations. From a technical perspective, it may be stated that multilevel analysis shows a high degree of similarity with traditional linear regression including many of its presuppositions. This study enables us to conclude that multilevel analysis is an appropriate tool for researchers interested in the identification of the effects of social context on human behavior.

La modelación jerárquica y los efectos de grupo en la predicción del rendimiento académico / The hierarchical modelling and the group effects in the prediction of academic performance

El presente trabajo se realizó con el propósito de mostrar que el grupo es un modificador de la relación entre el rendimiento académico y sus predictores y con ello, fundamentar la necesidad de recurrir a la modelación jerárquica para la predicción del rendimiento. Se aplicaron modelos con coeficientes aleatorios, especialmente apropiados para la circunstancia frecuente de casos agrupados, en la que los supuestos usuales de los modelos lineales ordinarios dejan de ser válidos y los modelos clásicos, inaplicables. Se constató que algunos de los predictores tradicionales tenían relevancia condicionada al grupo, aunque no parecían tener relevancia marginal. Se demostró así que el grupo es un modulador de la relación entre el rendimiento académico y algunos de sus predictores. La consecuencia de mayor trascedencia fue que la asignación de un estudiante a un grupo podía influir considerablemente en su rendimiento académico, independientemente de sus condiciones iniciales

The present paper was aimed at demonstrating that the group acts as a modifier of the relation between the academic performance and its predictors, and at founding the need of resorting to hierarchical modelling to predict this performance. Models with randomized coefficients, specially appropriate for the frequent circumstance of grouped cases, where the suppossed ordinary lineal models are not valid anymore and the classical models are unapplicable, were applied. It was proved that some of the traditonal predictors were relevant according to the group, though they did not seem to have marginal relevancy. This way, it was demonstrated that the group was a modullator of the relation between academic performance and some of its predictors. The most significant consequence was that the assignation of a student to a group may influence considerably on his academic performance, independently of its initial conditions.