Employment of Item Response Theory to measure change in Children's Analogical Thinking Modifiability Test / Emprego da Teoria de Resposta do Item para medida de mudança no Children's Analogical Thinking Modifiability Test

Dynamic testing, with an intermediate phase of assistance, measures changes between pretest and post-test assuming a common metric between them. To test this assumption we applied the Item Response Theory in the responses of 69 children to dynamic cognitive testing Children's Analogical Thinking Modifiability Test adapted, with 12 items, totaling 828 responses, with the purpose of verifying if the original scale yields the same results as the equalized scale obtained by Item Response Theory in terms of "changes quantifying". We followed the steps: 1) anchorage of the pre and post-test items through a cognitive analysis, finding 3 common items; 2) estimation of the items' difficulty level parameter and comparison of those; 3) equalization of the items and estimation of "thetas"; 4) comparison of the scales. The Children's Analogical Thinking Modifiability Test metric was similar to that estimated by the TRI, but it is necessary to differentiate the pre and post-test items' difficulty, adjusting it to samples with high and low performance...

Provas assistidas, com fase intermediária de ensino, medem mudanças entre pré-teste e pós-teste pressupondo uma métrica comum entre eles. Para testar este pressuposto, aplicou-se a Teoria de Resposta ao Item nas respostas de 69 crianças à prova cognitiva assistida Children's Analogical Thinking Modifiability Test adaptada, com 12 itens, totalizando 828 respostas, para verificar se a escala original produzia os mesmos resultados em termos de quantificação de mudança que a escala equalizada obtida via Teoria de Resposta ao Item. Seguiram-se os passos: 1) ancoragem dos itens de pré e pós-teste, por uma análise cognitiva, encontrando-se três itens em comum; 2) estimação do parâmetro de dificuldade dos itens e comparação destes; 3) equalização dos itens e estimação dos "thetas"; 4) comparação das escalas. A métrica do Children's Analogical Thinking Modifiability Test foi semelhante à estimada pela Teoria de Resposta ao Item, mas é preciso diferenciar a dificuldade dos itens de pré e pós-teste, adequando-o a amostras com alto e baixo desempenho...

Desempenho de crianças com e sem necessidades especiais em provas assistidas e psicométricas / Children's performance with and without special needs in dynamic and in psychometric testing

Provas cognitivas assistidas, que incluem auxílio do examinador, analisam o processo de resolução de problemas e o potencial de aprendizagem, complementando a avaliação psicométrica tradicional. São úteis especialmente para casos de necessidades educativas especiais (NEE). Este estudo analisou relações entre o desempenho de crianças, com e sem necessidades de educação especial (NEE), em três provas assistidas e duas psicométricas, entre o perfil de desempenho nas provas assistidas e variáveis de status (gênero, escolaridade e NEE). Foram analisados 256 resultados de provas assistidas e 228 psicométricas, obtidos em seis pesquisas, com 228 crianças (125 meninas), com 5-12 anos (M = 8 anos e 6 meses), cursando da Educação Infantil ao Ensino Fundamental (três em classe especial) e apresentando: dificuldade de aprendizagem (63), deficiência visual (6), nascidas prematuras e com baixo peso (38), prematuras e com muito baixo peso (30) e sem NEE (91); nas provas psicométricas, as classificações no Columbia-EMC (69 aplicações) concentraram-se em Média-Inferior (40,5%) e Média (33,3%) e no Raven-MPC (159 aplicações), nas faixas Intelectualmente na Média (45,2%) e Definidamente Acima da Média (23,9%). Quanto às provas assistidas (256 aplicações) - Jogos de Perguntas de Busca com Figuras Geométricas (154 aplicações) e com Figuras Diversas (34 aplicações) e Children's Analogical Thinking Modifiability Test (68 aplicações) predominou o perfil Ganhador (55,8%), seguido do perfil Ganhador Dependente da Assistência (16,8%), Não Mantenedor (14%) e Alto Escore (13,3%). Não houve associações significativas entre o desempenho nas provas assistidas e psicométricas, confirmando-se a proposição de complementaridade dessas metodologias avaliativas, especialmente para crianças com problemas no desenvolvimento.

Assisted cognitive tests, that include assistance from an examiner, analyze the process of problem solving and the learning potential, complementing traditional psychometric assessment. They are especially useful for cases of special educational needs (SEN). This study analyzed the relationship between the performance of children with and without special needs, in three assisted and two psychometric tests, and between the performance profile in assisted tests and status variables (gender, education and SEN). Results of 256 assisted tests and 228 psychometric tests were analyzed, those obtained in six studies, that counted with 228 children (125 girls) with 5-12 years (M = 8 years and 6 months), enrolled from kindergarten to elementary school (three in special class) and stating: learning disability (63), visual impairment (6), premature birth and low body weight (38), premature birth and very low body weight (30) and without SEN (91). In psychometric tests, the ratings at Columbia-EMC (69 applications) were mostly Medium-lower (40.5%) and Medium (33.3%) and in Raven-MPC (159 applications), Intellectually on the Average (45.2%) and Definitely Above Average (23.9%). As for assisted tests (256 applications) - Search Question's Game with Geometric Figures (154 applications) and with General Figures (34 applications) and the Children's Analogical Thinking Modifiability Test (68 applications) predominated the profile Winner (55.8%), followed by the profile Winner Dependent on Assistance (16.8%), No Maintainer (14%) and High Score (13.3%). There were no significant associations between performance on psychometric and assisted tests, confirming the proposition of complementarity of these assessment methodologies, especially for children with development problems.