Development of a questionnaire to evaluate the usability of assessment instruments / Desenvolvimento de um questionário que avalia a praticabilidade de instrumentos de medidas / Desarrollo de un cuestionario que evalúa la factibilidad de instrumentos de medida

ABSTRACT

The aim of the present study was to develop a questionnaire to evaluate the usability of the Brazilian Portuguese version of the Job Factors Questionnaire. Content was validated using the recommended methodology: revision by an expert committee, and pretest. The usability instrument was applied to production and administrative workers in two metalworking industries. The expert committee’s suggestions were accepted, yielding a three-question questionnaire and a five-point Likert scale to evaluate the usability of assessment instruments. None of the 148 study participants encountered any difficulty during the pretest. The data collected showed that on average it took less than five minutes to answer the questionnaire, and the highest percentage score was for the option totally agree for all questions. The Instrument Usability Evaluation may be helpful to researchers concerned with data collection instrument quality.

RESUMO

O presente estudo teve por objetivo desenvolver um questionário para avaliar a praticabilidade da versão brasileira do Job Factors Questionnaire. A validação de conteúdo foi realizada seguindo a metodologia recomendada revisão por um comitê de especialistas e pré-teste. O instrumento de praticabilidade foi aplicado em trabalhadores de produção e administração de duas indústrias metalúrgicas. As sugestões dos membros do comitê foram aceitas, resultando em um questionário composto por de três questões e uma escala tipo Likert de cinco pontos que avalia a praticabilidade de instrumentos de medidas. Dentre os 148 sujeitos que participaram do estudo, nenhum deles apresentou qualquer dificuldade durante o pré-teste. Os dados coletados mostraram que o tempo gasto de resposta era inferior a cinco minutos, e a porcentagem mais elevada foi para a opção concordo totalmente para todas as questões. O questionário Avaliação da Praticabilidade de Instrumentos poderá ser útil para pesquisadores preocupados com a qualidade de instrumentos utilizados para a coleta de dados.

RESUMEN

Este estudio tuvo como objetivo elaborar un cuestionario para evaluar la factibilidad de la versión brasileña del Job Factors Questionnaire. La validez del contenido fue realizada siguiendo la metodología recomendada revisión por un comité de expertos, y prueba preliminar. El instrumento de factibilidad se aplicó a los trabajadores en la producción y la administración de dos industrias metalúrgica. Las sugerencias de los miembros del comité fueron aceptadas, lo que resulta en un cuestionario que consta de tres cuestiones y una escala Likert de cinco puntos que evalúa la factibilidad de los instrumentos de medida. Entre las 148 personas que participaron del estudio, ninguno presentó dificultades durante la prueba preliminar. Los datos recogidos han demostrado que el tiempo de respuesta fue de menos de cinco minutos, y el porcentaje fue mayor a la opción completamente de acuerdo a todas las cuestiones. El Cuestionario de Evaluación de Factibilidad puede ser útil a los investigadores preocupados por la calidad de instrumentos utilizados para recopilación de datos.