Avaliação de perguntas e a interação entrevistador-entrevistado em entrevista com uso de questionário padronizado / Evaluating questions and interviewer-interviewee interaction in an interview using a standardized questionnaire

Resumo A avaliação de perguntas de questionário de inquérito de saúde no Brasil limita-se, na maioria das vezes, aos testes-piloto e debriefing das entrevistas. O objetivo do presente artigo é contribuir para preencher essa lacuna ao apresentar uma metodologia de avaliação cognitiva para identificação de perguntas potencialmente "problemáticas" quanto à sua formulação e o que ocorre, na interação entrevistador-entrevistado, ao aplicá-las em entrevistas com o uso de questionário padronizado em um inquérito regional de saúde. O estudo utilizou dois roteiros padronizados para identificação de dificuldades de redação e/ou compreensão e avaliação da interação entrevistador-entrevistado. Dentre as 513 perguntas do questionário individual de pesquisa, 68 questões foram indicadas como sendo potencialmente problemáticas à compreensão e comunicação pelos entrevistados. As perguntas que apresentaram problemas na sua formulação, com maior pontuação (>40), foram aquelas relacionadas à quantificação de tempo; ao grau de dificuldade para o autocuidado; à situação no trabalho e à estimação do rendimento. Dentre as perguntas apontadas como problemáticas na avaliação pelo Sistema de Apreciação de Perguntas (SAP), o autocuidado e horas trabalhadas estão entre aquelas que também tiveram pontuação alta na avaliação da interação.

Abstract The evaluation of health survey questions in Brazil is limited, in most cases, to pilot tests and interview debriefing. The purpose of this article is to contribute to filling this gap by presenting a cognitive assessment methodology for identifying potentially "problematic" questions regarding their formulation and what happens in the interviewer-interviewee interaction, when applying them in interviews using the standardized questionnaire in a regional health survey. In this study, two standardized scripts were used to identify difficulties in writing and/or understanding and evaluating the interviewer-interviewee interaction. Among the 513 questions in the individual research questionnaire, 68 questions were indicated as being potentially problematic for the interviewees to understand and communicate. The questions that presented problems in their formulation, with the highest score (>40), were those related to the quantification of time; the degree of difficulty for self-care; work situation and income estimation. Among the questions identified as problematic in the evaluation by the Question Appraisal System (SAP), self-care and hours worked are among those that also scored high in the interaction evaluation.

Controle por regras: efeitos de perguntas, propriedades formais de regras e esquemas de reforço / Control by rules: effects of questions, formal properties of rules and reinforcement schedules

Com o objetivo de investigar os efeitos de variáveis sobre o seguimento de regras, 24 estudantes universitários foram expostos a um procedimento de escolha de acordo com o modelo. A tarefa era apontar para os estímulos de comparação em sequência. Na Fase 1, a sequência correta era estabelecida por reforço diferencial em esquema de reforço contínuo. Nas Fases 2 e 3, as contingências de reforço eram mantidas inalteradas, enquanto as regras discrepantes de tais contingências (sugestão e ordem) eram manipuladas. Nas Condições 1 e 2, nas Fases 2 e 3, eram apresentadas a sugestão e a ordem, respectivamente. Nas Condições 3 e 4, era o inverso. Apenas na Fase 1 das Condições 1 e 3 eram feitas perguntas acerca do comportamento que produz reforço. 100% dos participantes não seguiram a sugestão e 60% não seguiram a ordem. Os resultados sugerem que a história do comportamento alternativo ao especificado pela regra, justificativas e perguntas são variáveis que podem interferir no comportamento de seguir regras discrepantes das contingências de reforço. Os resultados têm implicações para o esclarecimento das funções das contingências de reforço e de regras na explicação do comportamento.

Aiming the investigation of the effects of some variables on rule following, 24 college students were submitted to a matching-to-sample procedure, with the task of pointing to the comparison stimuli in sequence. In Phase 1 the correct sequence was established by differential reinforcement in continuous reinforcement schedule. In Phases 2 and 3 the reinforcement contingencies were kept unchanged, and meanwhile rules (suggestion and mand) discrepant of the contingencies were manipulated. In Conditions 1 and 2, Phases 2 and 3 suggestion and mand were presented in this sequence. In Conditions 3 and 4 the presentation order was reversed. Questions concerning why the behavior was reinforced were presented only in Phase 1 of Conditions 1 and 3. Hundred percent participants did not follow the suggestion, 60% did not follow the mand. Results indicate that the history of alternative behavior to the specified by the rule, justifications, and questions may interfere with the discrepant-to-the-contingencies rule-following, and implications for the comprehension of the functions of the reinforcement contingencies and rules in the explanation of behavior.

Efectos de un entrenamiento correctivo en la elaboración y fundamentación de preguntas de investigación / Effects of corrective training in the identification and development of research questions / Efeitos de um treinamento corretivo na elaboração e fundamentação de perguntas de pesquisa

Se analizaron los efectos de un entrenamiento correctivo en la identificación y elaboración de algunos elementos de artículos empíricos (enmarcados en el Análisis Experimental de la Conducta), en el que se estudiaron los efectos de la retroalimentación y las instrucciones en tareas de discriminación condicional, con el objetivo de registrar si ello promovía el ejercicio de habilidades para elaborar y fundamentar preguntas de investigación. Participaron 20 estudiantes de psicología de una universidad pública mexicana, con edades entre los 20 y 22 años, asignados al azar a dos grupos: experimental y control. Ambos grupos fueron expuestos a una Línea Base (LB), a dos fases de entrenamiento (excepto el control) y a una sesión de evaluación. En la LB y en la evaluación los participantes debían leer dos artículos experimentales y elaborar y justificar una pregunta de investigación novedosa derivada de estos. El grupo experimental fue expuesto a un entrenamiento correctivo en la identificación (ejercicio 1) y la elaboración (ejercicio 2) de diversos elementos de artículos científicos que tenían como objetivo auspiciar desempeños en niveles intrasituacional y extrasituacional, respectivamente. Los resultados mostraron que la mayoría de los participantes del grupo experimental lograron una drástica mejoría en sus puntajes de aciertos de la LB a la evaluación, y que seis de los diez participantes fueran capaces de escribir y fundamentar sus preguntas de investigación en un nivel extrasituacional, lo que no ocurrió con los del grupo control en ningún aspecto. Los datos se discuten en términos de la importancia que tiene identificar estrategias efectivas para la formación de nuevos investigadores, sobre todo en lo relativo al desarrollo de habilidades lectoescritoras.

The effects of corrective training in the identification and development of some elements of empirical articles (framed within the Experimental Analysis of Behavior) were analyzed. The impact of feedback and instructions on conditional discrimination tasks were studied with the aim of determining whether this would promote the development of skills to elaborate and substantiate research questions. Twenty psychology students from a Mexican public university aged between 20 and 22 years were randomly assigned to the experimental and control groups. Both groups were exposed to a baseline, two training phases (except the control group) and to an assessment session. During baseline and assessment, participants read two experimental articles and formulated and justified a new research question derived from them. The experimental group was exposed to a corrective training in identifying (exercise 1) and developing (exercise 2) the various elements of scientific articles that were intended to improve reading and writing technical materials at extrasituational and intrasituational levels. Results showed that for most participants in the experimental group, correct answers increased in comparison to baseline and that six of the ten participants were able to write and justify their research questions at an extrasituational level. The control group failed on both counts. Data are discussed in terms of the importance of identifying effective strategies for training new researchers, especially regarding the development of reading and writing skills.

Analisaram-se os efeitos de um treinamento corretivo na identificação e elaboração de alguns elementos de artigos empíricos (dentro da Análise Experimental da Conduta), em que se analisavam os efeitos da retroalimentação e das instruções em tarefas de discriminação condicional, com o objetivo de registrar se isso promovia o exercício de habilidades para elaborar e fundamentar perguntas de pesquisa. Participaram 20 estudantes de psicologia de uma universidade pública mexicana, com idade entre 20 e 22 anos, divididos aleatoriamente em dois grupos: experimental o controle. Ambos grupos foram expostos a uma Linha Base (LB), a duas fases de treinamento (exceto o controle) e a uma sessão de avaliação. Na LB e na avaliação os participantes deviam ler dois artigos experimentais e elaborar e justificar uma pergunta de pesquisa inovadora derivada dos mesmos. O grupo experimental foi exposto a um treinamento corretivo na identificação (exercício 1) e na elaboração (exercício 2) de diversos elementos de artigos científicos que tinham como objetivo estimular desempenhos em níveis intrasituacionais e extrasituacionais, respectivamente. Os resultados mostraram que a maioria dos participantes do grupo experimental conseguiram uma drástica melhoria em suas pontuações de acertos da LB à avaliação, e que seis dos dez participantes foram capazes de escrever e fundamentar suas perguntas de pesquisa em um nível extrasituacional, o que não aconteceu com os do grupo controle em nenhum aspecto. Os dados discutem-se em termos da importância que possuem para identificar estratégias efetivas para a formação de novos pesquisadores, sobretudo no relativo ao desenvolvimento de habilidades lecto-escritoras.

Efeitos de perguntas e de respostas às perguntas sobre o seguir regras apresentadas em uma história infantil / Effects of questions and answers to questions about rule following presented in children's stories

O estudo investigou os efeitos de perguntas e respostas às perguntas sobre o seguir regras por 15 crianças, distribuídas em três grupos. Nas fases 1 e 3 era medido o comportamento de doar bombons e na Fase 2 era contada uma história com uma regra especificando que quem doa alimentos tem amigos para brincar. Os grupos diferiram na Fase 2: para o Grupo 1 não eram feitas perguntas; para o Grupo 2 eram feitas perguntas ao longo da história; e para o Grupo 3 eram feitas perguntas ao final da história. Dos participantes que não doaram bombons na Fase 1 dos grupos 1, 2 e 3, 50%, 100% e 100%, respectivamente, doaram na Fase 3. Sugere-se que perguntas e respostas podem interferir na ocorrência do seguir regras.

The effects of questions and answers to questions upon rule following were investigated with 15 children, distributed in three groups. In phases 1 and 3, the number of candies given was measured; in Phase 2, a story was told with a rule specifying that who gives goodies has friends to play. The groups differed in Phase 2: for Group 1, the experimenter did not ask questions; for Group 2, questions were asked during the story telling; and for Group 3, questions were asked at the end of the story. From those participants who did not give candies in Phase 1 of groups 1, 2 e 3, 50%, 100% and 100%, respectively, did so in Phase 3. The results of this study suggest that questions and answers interfere with the occurrence of rule following.

Efeitos de manipulações de propriedades formais de estímulos verbais sobre o comportamento / Effects of manipulation of formal properties of verbal stimuli on behavior

Objetivando avaliar os efeitos de estímulos antecedentes verbais sobre o comportamento, 24 estudantes universitários foram expostos a um procedimento de escolha segundo o modelo; a tarefa consistia em apontar para cada um dos três estímulos de comparação. O comportamento correto era reforçado em razão fixa 6. Na Condição 1, a ordem de apresentação dos estímulos nas Fases 2, 3, 4 e 5 era: instrução correspondente, instrução mínima, pergunta correspondente, pergunta mínima, respectivamente. As oito condições diferiam quanto à ordem de apresentação das instruções e perguntas. A instrução e a pergunta correspondente estabeleceram o comportamento correto em 95 por cento e 33 por cento dos casos, respectivamente. A instrução e a pergunta mínima não estabeleceram o comportamento correto. Os resultados têm implicações para as definições de regras.

Aiming to investigate the effects of antecedent verbal stimuli on behavior, twenty-four students were exposed to a match to sample procedure. The task consisted of pointing out to each of three comparison stimuli. The correct behavior was reinforced in fixed ratio 6. In Condition 1, the order of the presentation of the stimuli at the beginning of phases 2, 3, 4 and 5 was: corresponding instruction, minimal instruction, corresponding question, minimal question, respectively. The eight conditions differed only in the order in which the verbal stimuli were presented. The corresponding stimuli and corresponding question established the correct behavior in 95 percent and 33 percent of the cases, respectively. The minimal stimuli didn't establish the correct behavior. The results have implications on the defining of rules.

Efectos de la exposición a diferentes criterios de logro en la elaboración de preguntas informales / Effects of exposure to different achievement criteria on the elaboration of informal questions / Efeitos da exposição a diferentes critérios de logro na construção de perguntas informais

Se evaluó el efecto de proporcionar información diferencial del criterio de logro (definido como la especificación de los requisitos que el individuo debe cumplir o ante los cuales debe ajustarse) al elaborar preguntas informales relacionadas con la vida cotidiana, las cuales para su formulación no requieren de un entrenamiento especializado. Estudios previos han indicado la necesidad de evaluar las condiciones que favorecen la elaboración de preguntas pertinentes en diferentes contextos. Uno de los elementos necesarios para ello puede ser la especificación previa de los requisitos que deben cumplir las preguntas a elaborar (especificación del criterio de logro). El diseño experimental implicó la exposición de los sujetos a especificidades diferenciales del criterio de logro. Participaron 60 estudiantes de preparatoria, licenciatura y posgrado. Los resultados indicaron que los grupos que se expusieron a criterios más específicos elaboraron un mayor número de preguntas, y éstas fueron más pertinentes a la situación. El mejor desempeño fue el de los participantes de posgrado y licenciatura. Los hallazgos se discuten en términos de las implicaciones que el ser capaz de elaborar preguntas pertinentes puede tener en los contextos académicos.

The effect of providing differential information regarding achievement criteria while making informal questions related to everyday life and whose formulation does not require a specialized training was evaluated. Achievement criteria defined as the specification of the requirements an individual must meet or to which he should adjust .Previous studies have indicated the need to evaluate the conditions that allow the development of question-asking skills in different contexts. One of the necessary elements of this task may be the previous specification of the criteria a question must meet (specification of the achievement criteria). The experimental design involved the exposure to different achievement criteria. Participants were 60 students from high school, as well as college undergraduate and graduate students. Results indicated that the groups exposed to the more specific criteria developed a greater number of questions, and these were more relevant to the situation. Undergraduate and graduate students performed more effectively than the high-school ones. Findings are discussed in terms of the implications of being able to pose pertinent questions (in academic contexts).

Avaliou-se o efeito de prover informação diferencial do critério de logro (definido como a especificação dos requisitos que o indivíduo deve cumprir ou aos que deve submeter-se) ao construir perguntas informais relacionadas com o dia a dia, que não exigem treinamento especializado. Estudos prévios indicam a necessidade de avaliar as condições que favorecem a construção de perguntas pertinentes em diversos contextos. Um elemento necessário para lográ-lo pode ser a especificação prévia dos requisitos que devem cumprir as perguntas que vão a elaborar-se (especificação do critério de logro). O desenho experimental implicou a exposição dos sujeitos a especificidades diferenciais do critério de logro. Participaram 60 estudantes de ensino secundário, licenciatura e pós-grado. Os achados indicaram que os grupos expostos a critérios mais específicos construíram o maior numero de perguntas, e mais pertinentes à situação. Os estudantes de licenciatura e pós-grado desempenharam-se melhor. Os resultados discutem-se à luz das implicações que ser capaz de construir perguntas pertinentes pode ter nos contextos acadêmicos.