Validación de un modelo de cuatro estrategias de resolución de ítems de razonamiento en una prueba estandarizada de selección / Validation of a Four-Strategies Model for Solving Reasoning Items in a Standardized Selection Test

Resumen La premisa de este estudio consiste en que un modelo cognitivo permite a las personas mejorar el desempeño en la resolución de preguntas de una prueba estandarizada donde el uso de estrategias tiene un papel crucial. El propósito de la investigación fue validar un modelo cognitivo con cuatro estrategias definidas por jueces expertos con base en los procesos de respuesta que subyacen a ítems de la Prueba de Aptitud Académica de la Universidad de Costa Rica (UCR). Se realizaron ocho en trevistas semiestructuradas a estudiantes de la UCR, quienes estaban cursando el primer año en esta institución y se aplicaron las técnicas de reporte verbal para obtener evidencias de los procesos de respuesta de los ítems. Se analizaron los reportes para comprobar la correspondencia entre el marco de las estrategias definidas previamente por jueces expertos y las respuestas dadas por los participan tes. Los resultados indicaron que los participantes siguieron las estrategias propuestas para la solu ción de las situaciones planteadas por los jueces; por tanto, los ítems son indicadores de los procesos subyacentes a estas estrategias. Estos hallazgos abren la posibilidad de implementar investigaciones con atributos presentes en cada estrategia propuesta de este estudio, que posibiliten predecir las pun tuaciones de la prueba en el rendimiento académico en la UCR

Abstract The premise of this study is that a cognitive model can increase students' performance for solving items on a stan dardized test, where strategies play a crucial role. The purpose of the study is to validate a cognitive model with four strategies defined by expert judges based on the response processes that underlie the items of the University of Costa Rica (UCR) Academic Aptitude Test. Eight semi-structured interviews were conducted with first-year students at UCR and the techniques of verbal reporting were applied to gather evidence of the items' response processes. The reports were analyzed to verify the correspondence between the framework of the strategies pre viously defined by expert judges and the answers given by the participants. In light of the results, it was concluded that the participants followed the proposed strategies for solving the situations posed, and, therefore, the items are indicators of the processes underlying these strategies. The results open the possibility of implementing research with attributes present in each strategy proposed in this study, which will allow predicting test scores in academic performance at the UCR.

Autorreportes verbales en voz alta para la identificación de procesos de razonamiento en pruebas estandarizadas / Verbal Self-reporting to Identify Reasoning Processes in Standardized Tests

Resumen: Los estándares actuales, para la evaluación de la calidad psicométrica de las pruebas psicológicas y educativas, estipulan que una de las evidencias requeridas que justifican las inferencias derivadas de la aplicación de un test se refiere a las estrategias para contestar a los ítems que lo componen. Por lo tanto, el objetivo del presente artículo se propone presentar los resultados de una investigación, que consistió en la ejecución de entrevistas semiestructuradas a un conjunto de 15 estudiantes universi tarios de primer ingreso, cuyos reportes orales fueron analizados con el objetivo de fundamentar un conjunto de estrategias para contestar los ítems verbales de la Prueba de Aptitud Académica de la Universidad de Costa Rica, que habían sido identificadas previamente. Los resultados indican que efectivamente los participantes emplearon las estrategias propuestas, lo cual constituye una eviden cia de gran importancia sobre las habilidades de razonamiento que se miden con los ítems verbales de la Prueba de Aptitud Académica. Finalmente, se concluye con una discusión sobre los resultados acerca de la utilidad de los autorreportes verbales que recaban evidencias de validez para un test y sobre futuras investigaciones en esta línea.

Abstract: Current standards for assessing the psychometric quality of psychological and educational tests stip ulate that one indication required to justify the inferences derived from the application of a test are those related to answering strategies for the test items. Thus, this article presents the results of a study that involved the execution of semi-structured interviews with a group of 15 college freshmen, whose oral reports were analyzed to provide support for a set of strategies to answer previously identified verbal items from the "Academic Aptitude Test" (Prueba de Aptitud Académica) at the Universidad de Costa Rica. The results indicate that participants actually used the proposed strategies, which is important evidence about the reasoning skills measured by the Prueba de Aptitud Académica verbal items. Finally, we conclude with a discussion of the results, the usefulness of verbal self-reports to gather evidence for test validity and future research along these lines.

Consistencia entre el reporte verbal y los efectos psicofisiológicos registrados en el tratamiento de una fobia específica empleando la técnica de la Desensibilización Sistemática (DS) / Consistency between verbal report and psychophysiological effects registered in the treatment of a specific phobia using Systematic Desensitization

En la presente investigación se empleó un diseño cuasi-experimental de caso único AB para evaluar la consistencia del reporte verbal basado en Unidades Subjetivas de Ansiedad (USAS) y los efectos psicofisiológicos registrados en la aplicación de la técnica de la Desensibilización Sistemática, empleando el componente imaginario de ésta en un caso de fobia específica a las aves. Los resultados no mostraron una consistencia entre el informe verbal del sujeto, en el cual reportó, tanto cero USAS para 10 escenas ansiógenas, como una disminución en la activación fisiológica, y las medidas obtenidas en los equipos que registraban el pulso y la RGP. El pulso mostró una tendencia al aumento mientras que la RGP una tendencia a mantener los mismos niveles.

In the present research a quasi- experimental AB single case research design was used to assess the consistency of a verbal report based on Subjective Units of Discomfort (SUDS) and the psycho-physiological measures of pulse and galvanic skin response (GSR) when applying the systematic desensitization technique and using only its imaginary component in the treatment of a specific phobia to birds. The results found didn’t show a consistency between the participant’s verbal report, in which both cero SUDS were reported for 10 ansiogenic scenes and a decrease in the physiological arousal, and the measurements obtained by the equipment that registered pulse and GSR. In contrast, the pulse showed an increasing tendency and the GSR registered a tendency to maintain the same levels.