Mini-Mental State Examination in Brazil: An Item Response Theory Analysis / Miniexame do Estado Mental Brasileiro: Análise com Teoria de Resposta ao Item / Miniexamen del Estado Mental Brasileño: Análisis con la Teoría de Respuesta al Ítem

Abstract The Mini-Mental State Examination (MMSE) is currently used to the track cognitive status of older adults in Brazil. Studies on its psychometric properties are lacking, especially ones that use Item Response Theory. The objective was to assess the difficulty of the items in a Brazilian version of MMSE using the Rasch model and to identify possible differential item functioning (DIF), considering schooling, age and sex of the sample of Brazilian older adults. This study used the answers of 2.734 older adults to the 30 items of MMSE. It was found that four items in the seven series were the most difficult, and items nine, 13, 22 and 23 were the easiest. The skill of respondents was higher than the items' difficulty level. DIF was observed for schooling, sex and age in, respectively, 27, 18 and 16 items. It is concluded that the use of MMSE in Brazilian older adults should be cautious due to the large number of biased items, mainly due to schooling.

Resumo O Miniexame do Estado Mental (MEEM) tem sido utilizado para rastrear status cognitivo de idosos brasileiros. Há poucos estudos sobre suas propriedades psicométricas, especialmente com Teoria de Resposta ao Item. Este estudo teve por objetivo avaliar a dificuldade dos itens de uma versão brasileira do MEEM por meio do modelo de Rasch e identificar possível funcionamento diferencial dos itens (DIF), considerando escolaridade, idade e sexo dos integrantes de amostra de idosos da comunidade. Foram utilizadas as respostas de 2.734 idosos aos 30 itens do MEEM. Constatou-se que quatro itens do sete seriado foram os mais difíceis e os itens nove, 13, 22 e 23, os mais fáceis. O nível de habilidade das pessoas foi maior do que o nível de dificuldade dos itens. Observou-se DIF para escolaridade, sexo e idade, respectivamente 27, 18 e 16 itens. Conclui-se que o uso do MEEM em idosos da comunidade deve ser cauteloso devido ao grande número de itens enviesados, principalmente pela escolaridade.

Resumen El Miniexamen del Estado Mental (MMSE) se ha utilizado para rastrear el estado cognitivo de los ancianos brasileños. Sin embargo, no hay estudios sobre sus propiedades psicométricas, especialmente utilizando la Teoría de Respuesta al Ítem. El objetivo de este estudio fue evaluar la dificultad de los ítems de una versión brasileña del MMSE utilizando el modelo de Rasch, así como identificar el posible funcionamiento diferencial de los ítems (DIF), considerando el nivel de estudios, la edad y el sexo de los ancianos participantes de la muestra. Se utilizaron las respuestas de 2.734 ancianos a los 30 ítems del MMSE. Se evidenció que cuatro ítems de siete series fueron los más difíciles, y los ítems 9, 13, 22 y 23 los más fáciles. El nivel de habilidad de las personas fue más alto que el nivel de dificultad de los ítems. Se observó que el DIF para nivel de estudios, sexo y edad fueron 27, 18 y 16 ítems, respectivamente. Se concluye que el uso del MMSE en los ancianos de la comunidad debe ser cauteloso debido a la gran cantidad de ítems sesgados, principalmente por el nivel de estudios.

Análise das variáveis idade e sexo no desempenho do teste de inteligência (TI) / Analysis of age and sexual variables performance of intelligence test (TI) / Análisis de las variables edad y sexo en el desempenho del test de inteligencia (TI)

O objetivo do estudo foi a busca de evidências de validade para o teste de inteligência (TI) baseada na relação com as variáveis idade e sexo. Participaram do estudo 560 pessoas entre 18 e 67 anos (M = 26,26, DP = 8,62), sendo 358 homens (63,9%). Os resultados não apresentaram diferenças significativas no desempenho de homens e mulheres, ou seja, o desempenho no TI de homens e mulheres pôde ser considerado equivalente. Quanto à idade, foi encontrada uma correlação moderada e negativa, formando-se quatro faixas etárias pela Anova e sendo observado que ao aumento da idade correspondeu uma diminuição no desempenho no TI. Com base nessas informações, concluiu-se que os objetivos do estudo foram alcançados, ou seja, obtiveram-se evidências de validade para o TI baseada na relação com outras variáveis.

The aim of the study was to search for evidence of validity for the test of intelligence (TI) based on relation to variables of age and sex. The study included 560 people from 18 to 67 years old (M = 26.26, SD = 8.62), in which 358 were men (63.9%). The results showed no significant differences in performance between men and women, namely, the TI performance of men and women could be considered equivalent. As for age, it was found a moderate and negative correlation, forming four age groups by Anova and it was observed that the increase of age corresponded to a decrease in performance in TI. Based on this information, it was concluded that the study aims were achieved, in other words, we obtained evidence of validity to the TI based on relation to other variables.

El objetivo del estúdio fue buscar evidencias de validez para el test de inteligencia (TI) con base en la relación con las variables edad y sexo. Participaron del estudio 560 personas entre 18 y 67 años (M = 26,26, DT = 8,62), siendo 358 hombres (63,9%). Los resultados no presentaron diferencias significativas en el desempeño de hombres y mujeres, o sea, el desempeño en el TI entre los dos sexos puede ser considerado equivalente. Con la edad fue verificada una correlación moderada y negativa, formando cuatro grupos de edades por el Anova, siendo observado que al aumento de la edad hubo una disminución en el desempeño el TI. A partir de esas informaciones se concluye que los objetivos del estudio fueron alcanzados, o sea, se obtuvieron evidencias de validade para el TI con base en la relación con otras variables.

Contents and Methods of Psychological Assessment Teaching: a Study Involving Professors / Conteúdos e Metodologias de Ensino de Avaliação Psicológica: um Estudo com Professores / Contenidos y Métodos de Enseñanza de Evaluación Psicológica: un Estudio con Maestros

The aim in this study was to verify the contents taught and teaching methods used by undergraduate Psychology teachers, specifically in the subjects related to psychological assessment. A two-part questionnaire was used: the first part served to characterize the participants, and the second the subjects taught. Twenty-two teachers participated. Among the respondents, 72.7% were female, 77.3% were psychological assessment teachers and 45.5% had graduated from public universities. For the open question, about the subjects taught, analysis and expert analysis categories were established. About the subjects taught, most respondents teach the techniques and theoretical foundations of tests. In contrast, the history of assessment and the elaboration principles of psychological documents were the topics taught least.

O presente estudo teve como objetivo verificar os conteúdos ministrados e as metodologias de ensino utilizadas por professores de graduação em Psicologia, especificamente nas disciplinas relacionadas à avaliação psicológica. O instrumento utilizado foi um questionário com duas seções, a primeira com o objetivo de caracterizar os participantes, e a segunda abordando as disciplinas ministradas. Participaram do estudo 22 professores. Dos respondentes, 72,7% eram do sexo feminino, 77,3% eram docentes de avaliação psicológica e 45,5% se formaram em universidades públicas. Para a questão aberta, sobre as disciplinas ministradas, foram estabelecidas categorias de análise e análise de juízes. Pôde-se constatar que, quanto ao conteúdo ministrado, as técnicas são ensinadas pela maior parte dos respondentes, ao lado dos fundamentos teóricos dos testes. Em contrapartida, o histórico da avaliação e os princípios da elaboração de documentos psicológicos foram os menos contemplados.

Este estudio tuvo como objetivo verificar el contenido y la metodología de enseñanza utilizada por profesores de grado en psicología, específicamente en las disciplinas relacionadas con evaluación psicológica. El instrumento utilizado fue un cuestionario con dos partes, la primera con objeto de caracterizar a los participantes y la segunda tratando de las asignaturas enseñadas. Participaron del estudio 22 profesores. De los respondientes, el 72,7% era mujer, 77,3% era profesor de evaluación psicológica y 45,5% era capacitado en universidades públicas. Para la pregunta abierta sobre las materias enseñadas, fueron establecidas categorías de análisis y de análisis de los jueces. Se encontró que, respecto al contenido ministrado, las técnicas son enseñadas por la mayoría de los encuestados, junto con los fundamentos teóricos de las pruebas. En contrapartida, la historia de la evaluación psicológica y los principios de la preparación de documentos fueron los menos enseñados.

Evidências de validade convergente e pela comparação com construtos relacionados para o teste de inteligência / Evidence of convergent validity and of validity by comparison of related constructs for the intelligence test

Este estudo tem por objetivo a busca de evidências de validade convergente e de validade baseada na comparação com construtos relacionados para o Teste de Inteligência (TI), respectivamente pela correlação deste último com o Teste de Não Verbal de Inteligência (R1) e o Teste de Atenção Concentrada (AC). Participaram do estudo 484 candidatos à Carteira Nacional de Habilitação, com idade entre 18 e 67 anos (M=26,56, DP=8,81), sendo 63,8% homens. Os resultados indicaram coeficientes de correlação moderados e positivos (acima de 0,509) entre o TI e o R1, o que, de acordo com a literatura, pode ser interpretado como evidência de validade convergente, bem como correlações variando entre 0,20 e 0,50 entre o TI e o AC, indicando evidência de validade pela comparação com testes que avaliam construtos relacionados.

This study aims to establish evidence of convergent validity and of validity by comparison of related constructs for the Intelligence Test (TI) by examining the correlation between the TI and the Test of Nonverbal Intelligence (R1), and the correlation between the TI and the Concentrated Attention Test (AC). Participants consisted of 484 candidates for National Drivers License, of both sexes (63.8% men), with ages ranging from 18 to 67 years old (m=26.56, SD=8.81). The results showed moderate and positive correlation coefficients (above 0.509) between the TI and the R1, which, according to the literature, can be interpreted as evidence of convergent validity, as well as correlation coefficients ranging from 0.20 to 0.50 between the TI and the AC, indicating evidence of validity by comparison with tests that assess related constructs.

Análise de artigos sobre avaliação psicológica no contexto do trabalho: revisão sistemática / Analysis of articles on psychological assessment in the work context: a systematic review

Este estudo teve por objetivo realizar uma revisão sistemática da literatura da área da avaliação psicológica no trabalho na base de dados PePSIC entre 2000 e 2009, utilizando as palavras-chave "Psicologia do trabalho", "Psicologia organizacional" e "Avaliação psicológica". A maioria dos artigos empíricos encontrados se concentrou em 2007, de autoria múltipla, com temas relacionados à saúde do trabalhador e aspectos organizacionais. Somente um dos instrumentos versava sobre um teste psicológico especifico da área do trabalho, embora tenham sido encontrados ao todo 14 instrumentos psicológicos. A análise dos resultados demonstrou que embora tenha sido verificado um aumento de artigos envolvendo a avaliação psicológica no contexto do trabalho no período estudado, ainda é evidente a carência de produção em relação ao tema, sendo necessários outros artigos que possam suprir as necessidades ainda vigentes. Espera-se que este estudo possa fomentar novas pesquisas dentro do contexto da avaliação psicológica voltada ao trabalho, preenchendo as lacunas observadas.

This study sought to conduct a systematic review of the literature on psychological assessment in the work context in the database PePSIC between 2000 and 2009, using the keywords "Psychology of work", "Organizational Psychology" and "Psychological assessment". Most empirical articles were found in 2007, with multiple authors, and topics relating to worker’s health and organizational factors. Only one of the instruments was about a specific work psychological test, although there were found a total of 14 psychological instruments. The results showed that although it was verified an increase in articles about psychological assessment in the workplace during that period, the lack of production in the area it is still evident, and other studies are necessary to supply the present needs. It is hoped that this paper may encourage further research on the context of work psychological assessment in other to fill the current gaps.

Efeito da idade no Teste de Memória de Reconhecimento (TEM-R) / Aging effect on the Recognition Memory Test (TEM-R) / Efecto de la edad en el Test de Memoria de Reconocimiento (TEM-R)

O objetivo do estudo foi procurar evidência de validade desenvolvimental para o Teste de Memória de Reconhecimento TEM-R. Participaram da pesquisa 464 estudantes universitários de uma instituição particular do estado de Sergipe, de ambos os sexos, e com idade variando entre 17 e 53 anos (M=23,53, DP=6,49). O instrumento foi aplicado coletivamente em sala de aula, em horário previamente cedido pelo professor, com duração máxima de 10 minutos. Nos resultados foi possível observar correlação negativa e significativa entre a pontuação do TEM-R e a idade (r=-0,20, p=<0,001), sendo formadas três faixas etárias que se diferenciaram no desempenho no teste, quais sejam, até os 23 anos, dos 24 aos 35 anos e pessoas com 36 anos ou mais. Com base nisso, discute-se a verificação de evidência de validade para o TEM-R em função da idade, sendo que ao aumento da idade lhe correspondeu uma diminuição da capacidade de memória de reconhecimento...

The aim of this study was to search evidences of desenvolvimental validity for the Recognition Memory Test TEM-R. 464 college students of a particular institution of the state of Sergipe, both sexes, between 17 and 53 years old (M=23.53, SP=6.49) had participated of the research. The instrument had been applied collectively in classroom, previously scheduled by the teacher, with maximum duration of 10 minutes. In the results it was possible to observe negative and significant correlation between the scores of the TEM-R and the age (r=-0,20, p<0.001). Moreover, there were formed three age-groups with significantly different performances on the test, namely lowest through 23 years old, from 24 to 35 and 36 through higher. Based on this, it is argued the acquirement of an evidence of validity for the TEM-R in function of the age, because the increase in the age corresponded to a reduction in the capacity of memory recognition...

El objetivo del estudio fue buscar evidencia de validez de desarrollo para el Test de Memoria de Reconocimiento TEM-R. Participaron de la investigación 464 estudiantes universitarios de una institución privada del estado de Sergipe, de ambos sexos y con edad variando entre 17 y 53 años (P=23,53, DT=6,49). El instrumento fue aplicado colectivamente en las clases, con horário agendado previamente con el profesor, con duración máxima de 10 minutos. En los resultados fue posible observar una correlación negativa e significativa entre la puntuación del TEM-R y la edad (r=-0,20, p=<0,001), siendo formados tres grupos de edades que mostraon diferencias en el desempeño del test, siendo ellos, hasta los 23 años, de los 24 a los 35 años y personas con 36 años o más. Con base en eso, es discutida la verificación de evidencia de validez para el TEM-R en función de la edad, siendo que al aumento de la edad le corresponde una disminución de la capacidad de la memoria de reconocimiento...

Capacidade atencional: há decréscimo como passar da idade? / Attentional capacity:: does it decrease with the coming of age? / Capacidad atencional:: ¿hay decrecimientocon el aumento de edad?

O objetivo do estudo foi procurar evidência de validade baseada na variável idade para o Teste de Atenção Alternada - TEALT. Para isso, foi verificado se a capacidade de alternar a atenção diminuiria com o passar da idade. Participaram 798 indivíduos, dos Estados da Bahia e de Sergipe, sendo 442 (55,4 por cento) da Bahia e 356 (44,6 por cento) de Sergipe, do sexo masculino e feminino, e com idades variando entre 18 e 72 anos (M=26,56, DP=8,30). Em Sergipe, os participantes foram estudantes universitários de diferentes cursos, e, na Bahia, foram pessoas que passaram pela avaliação psicológica para a obtenção da carteira de motorista. O TEALT foi aplicado coletivamente no Estado de Sergipe, e de forma individual na Bahia. Os resultados evidenciaram correlação negativa e significativa entre a pontuação do TEALT e a idade, sendo formadas três faixas etárias que se diferenciaram no desempenho no teste. Dessa forma, concluiu-se por evidência de validade para o TEALT em função da idade, sendo que o seu aumento correspondeu a uma diminuição da capacidade de atenção alternada....(AU)

The objective of the study was to verify evidence of validity for the Alternating Attention Test - TEALT based on the variable age. For this it was verified if the capacity to alternate attention would diminish with the coming of age. 798 individuals from Bahia and Sergipe states participated in the research, being 442 (55.4 percent) from Bahia and 356 (44.6 percent) from Sergipe, both sexes, and with ages varying between 18 and 72 years (M=26,56; SD= 8,30). In Sergipe the participants were undergraduation students of different courses, and in Bahia they were people who had undergone psychological evaluation to obtain the driver’s license. The TEALT was applied collectively in the state of Sergipe, and individually in Bahia. The results showed negative and significant correlation between the punctuation of the TEALT and age. Three age groups were formed, and they had different performances in the test. Thus, the evidence of validity by age for the TEALT was accepted, since the increase of performance in the TEALT corresponded to a reduction in the capacity of alternating attention....(AU)

El objetivo del estudio fue procurar evidencia de validez basada en la variable edad para el Test de Atención Alternada - TEALT. Para eso, fue verificado si la capacidad de alternar la atención disminuiría con el aumento de edad. Participaron 798 individuos, de los Estados de Bahia y de Sergipe, siendo 442 (55,4 por ciento) de Bahia y 356 (44,6 por ciento) de Sergipe, del sexo masculino y femenino, y con edades variando entre 18 y 72 años (M=26,56, DP=8,30). En Sergipe, los participantes fueron estudiantes universitarios de diferentes cursos, y, en Bahia, fueron personas que pasaron por la evaluación psicológica para la obtención del carnet de conducir. EL TEALT fue aplicado colectivamente en el Estado de Sergipe, y de forma individual en Bahia. Los resultados evidenciaron correlación negativa y significativa entre la puntuación del TEALT y la edad, siendo formadas tres franjas etarias que se diferenciaron en el desempeño en el teste. De esa forma, se concluyó por evidencia de validez para el TEALT en función de la edad, siendo que su aumento correspondió a una disminución de la capacidad de atención alternada....(AU)

Evidências de validade para o Teste de Atenção Alternada - TEALT / Validity evidence for the Alternating Attention Test – TEALT

O objetivo deste estudo foi buscar evidências de validade para o Teste de Atenção Alternada (TEALT) pela relação com os Testes de Atenção Dividida (AD) e Sustentada (AS). Participaram da pesquisa 133 estudantes universitários de uma instituição particular do estado de Sergipe, de ambos os sexos, com média de 24,83 anos. Os instrumentos foram aplicados coletivamente e em sala de aula. Os resultados indicaram correlações positivas, em sua maioria, baixas e moderadas, entre o TEALT e o AD e AS. Isso demonstrou que ao aumento no desempenho no TEALT lhe correspondeu um aumento no desempenho nos demais testes. Assim, a evidência de validade para o TEALT pela correlação com o AD e AS foi verificada.

The objective of this study was to search for evidences of validity for the Test of Alternating Attention (TEALT) by the relation with the Test of Divided Attention (AD) and Sustained Attention (AS). 133 college students of a private institution of the state of Sergipe, both sexes, and with mean of 24,83 years, took part of the research. The instruments were administered collectively and in the classroom. The results indicated positive correlations, mostly low and moderate TEALT and between AD and AS. This demonstrated that an increase in performance in TEALT corresponded to an increase in performance on other tests. Thus, the validity evidence for the TEALT by correlation with the AD and AS was observed.

Color Trails Test: a Brazilian normative sample

The present study aims to evaluate psychometric data on the population of Brazil using of the Color Trails Test (CTT). The instrument was applied to 1,942 subjects who came from the north (1.4 percent), northeast (10.4 percent), midwest (7.7 percent), southeast (65.9 percent), and south (13.9 percent) regions of Brazil. Ages varied from 18 to 86 years (M = 40.03 years; DP = 16.02), with 386 males (19.9 percent) and 1,556 females (80.1 percent). Regarding schooling, 57 (3 percent) of participants were illiterate, 1.240 (64 percent) had primary education and 645 (33 percent) had a high school and/or superior diploma. The length of schooling ranged from 0 to 14 (M = 7.81, SD = 3.51) years. Good accuracy ratings were obtained using Spearman's coefficient on the main measures of the CTT, including time of execution form 1 (0.76) and form 2 (0.82). Regional variations showed that the northeast region had the worst results on the instrument. Males had better performance on the proposed task, with significant differences between age groups and the worst results for ages greater than 60 years. For both sexes, an increase in score was noticed with increasing age, and better performance was found with increasing levels of education. The present results suggest that the CTT can identify attentional disturbances with significant variations in the time of execution.

Compreensão e estratégias de leitura no ensino fundamental / Comprehension and reading strategies in elementary school

O uso eficiente de estratégias de leitura tem sido associado a um melhor desempenho de compreensão em leitura em todos os níveis de escolarização. A proposta deste estudo foi avaliar a compreensão em leitura e o uso de estratégias de leitura em alunos do ensino fundamental. A amostra foi constituída por 67 alunos da 2ª à 4ª série do ensino fundamental de uma escola pública. Desses, 50,70% eram do sexo feminino e 49,3% masculino, entre 7 e 13 anos (M= 9,04; DP= 1,38). Utilizaram-se um teste Cloze e a Escala de Estratégias Metacognitivas de Leitura. Os alunos mais velhos e de séries mais avançadas apresentaram melhor desempenho na compressão em leitura e menor uso de estratégias de leitura. O desempenho em compreensão em leitura das meninas foi maior, assim como o uso de estratégias de leitura. A associação entre as variáveis compreensão e o uso de estratégias de leitura foi nula.

The efficient use of reading strategies has been associated with a better performance on reading comprehension in each schooling levels. The purpose of this study was to evaluate the reading comprehension and the use of reading strategies on elementary school students. The sample was constituted of 67 students of the second to fourth grade of the public elementary school, of these, 50,70% were female and 49,3% male, between 7 and 13 years old (M = 9,04; SD = 1,38). It was used the Cloze test and the Metacognitive Reading Strategies Scale. The oldest students and on more advanced grades presented better performance in the compression of reading and a less use of reading strategies. The performance of reading comprehension in girls was better, as well as your use of reading strategies. The association between the reading comprehension variable and the use of reading strategies was null.

Alfabetização e consciência metalingüística: um estudo com adultos não alfabetizados / Literacy and metalinguistic development: a study with illiterate adults

Este estudo - com vinte e cinco adultos (5 não alfabetizados, 7 com nível de leitura intermediário e 13 com nível de leitura mais avançado) - foi delineado para investigar o papel da alfabetização no desenvolvimento da consciência metalingüística. Os adultos realizaram várias tarefas de consciência sintática e fonológica. Os resultados das análises de variância não paramétricas realizadas mostraram que os adultos não alfabetizados tiveram performances inferiores, em geral, a dos alfabetizados. No entanto pouca diferença foi encontrada entre os grupos de leitores. Os resultados sugerem que a alfabetização tem um efeito no desenvolvimento metalingüístico.

This study was designed to investigate the role of literacy in metalinguistic development. Twenty-five adults (5 illiterate, 7 in an intermediate level of literacy and 13 in a advanced level) participated in this study. The adults were tested in several syntactic and phonological awareness tasks. Results of non-parametric Analysis of Variance showed that illiterate adults had overall worse performance than the literate ones. There was little difference between the literate groups. The results suggest that literacy have an effect in metalinguistic awareness development.