RESUMO
Abstract Objectives Evaluate the reliability test-retest (intra and inter-examiner) and construct validity of the Long Version of Disability Assessment for Dementia (Brazilian Version - DADL-BR). Methods The DADL-BR was applied to 58 caregivers/family of older adults with dementia. The inter-examiner (n = 30) and intra-examiner (n = 28) reliability was assessed using the kappa test and Pearson's correlation coefficient, and the internal consistency was assessed using Cronbach's alpha. The construct validity (n = 48) was performed by comparing DADL-BR with MMSE. Results The results of the intra and inter-examiner demonstrated good reliability (0.72 and 0.74), as well as nearly perfect correlations (0.99) for both inter- and intra-examiner reliability. The internal consistency was excellent (0.87) and the results demonstrated a good correlation (0.74) between DADL-BR and MMSE in construct validity analysis. Conclusions DADL-BR can be considered reliable instrument and with good construct validity, considering internal consistency and test-retest reliability and may be constitute a useful instrument for assessing the occupational performance profile of older adults with dementia.
Resumo Objetivos Avaliar a confiabilidade teste-reteste (intra e inter-examinadores) e a validade de construto da Versão Longa da Escala de Avaliação de Incapacidade na Demência - Versão Longa (DADL-BR). Métodos O DADL-Br foi aplicado em 58 cuidadores/familiares de idosos com demência. A confiabilidade inter-examinadores (n = 30) e intrae-xaminadores (n = 28) foi avaliada pelo teste kappa e coeficiente de correlação de Pearson, e a consistência interna foi avaliada pelo Alfa de Cronbach. A validade de construto (n = 48) foi realizada comparando-se o DADL-BR com o Mini Exame do Estado Mental (MEEM). Resultados Os resultados intra e inter-examinadores demonstraram boa confiabilidade (0,72 e 0,74), bem como correlações quase perfeitas (0,99) tanto para confiabilidade inter quanto intra-examinadores. A consistência interna foi excelente (0,87) e os resultados demonstraram boa correlação (0,74) entre o DADL-BR e o MEEM na análise de validade de constructo. Conclusões O DADL-BR pode ser considerado um instrumento confiável e com boa validade de constructo, considerando-se a consistência interna e a confiabilidade teste-reteste, e útil para avaliar o perfil de desempenho ocupacional de idosos com demência.
RESUMO
RESUMO Objetivo Buscar evidências de validade e fidedignidade para o Teste de Fala Comprimida com Figuras. Método O estudo foi subdividido em três etapas: validação de construto, critério e fidedignidade. Todos os participantes tinham idade entre 6:00 e 8:11. Para o construto, aplicou-se o Fala Comprimida com Figuras e o teste padrão ouro Fala Comprimida Adaptado em crianças com desenvolvimento fonológico típico. Para análise de critério, aplicou-se o Fala Comprimida com Figuras em dois grupos, com desenvolvimento fonológico típico (G1) e atípico (G2). Por fim, os protocolos de aplicação passaram pela análise de duas Fonoaudiólogas, com experiência na área do Processamento Auditivo Central, buscando obter uma análise de fidedignidade interavaliadores. Resultados O teste de correlação indicou um construto quase perfeito (Rho=0,843 para orelha direita e Rho=0,823 para orelha esquerda). Na análise de critério, percebeu-se que ambos os grupos apresentaram resultados satisfatórios (G1 = 99,6 a 100%; G2 = 96 a 96,5%). Já a análise de fidedignidade demonstrou que o protocolo é de fácil análise, pois ambos os profissionais apresentaram respostas unânimes. Conclusão Foi possível obter evidências de validade e fidedignidade para o instrumento de Fala Comprimida com Figuras. A análise de construto evidenciou que o instrumento mede a mesma variável que o teste padrão outro, com correlação quase perfeita. Na análise de critério, ambos os grupos apresentaram desempenho semelhante, demonstrando que o instrumento não parece diferenciar populações com e sem transtorno fonológico leve. A análise de fidedignidade interavaliador demonstrou que o protocolo é de fácil análise e pontuação.
ABSTRACT Purpose To seek evidence of validity and reliability for the Compressed Speech Test with Figures. Methods The study was subdivided into three stages: construct validation, criteria and reliability. All participants were aged between 6:00 and 8:11. For the construct, Compressed Speech with Figures and the gold standard Adapted Compressed Speech test were applied to children with typical phonological development. For criterion analysis, Compressed Speech with Figures was applied in two groups, with typical (G1) and atypical (G2) phonological development. Finally, the application protocols underwent analysis by two Speech Therapists, with experience in the area of Central Auditory Processing, seeking to obtain an inter-evaluator reliability analysis. Results The correlation test indicated an almost perfect construct (correlation 0.843 for the right ear and 0.823 for the left ear). In the criterion analysis, it was noticed that both groups presented satisfactory results (G1 = 99.6 to 100%; G2 = 96 to 96.5%). The reliability analysis demonstrated that the protocol is easy to analyze, as both professionals presented unanimous responses. Conclusion It was possible to obtain evidence of validity and reliability for the Compressed Speech with Figures instrument. The construct analysis showed that the instrument measures the same variable as the gold standard test, with an almost perfect correlation. In the criterion analysis, both groups presented similar performance, demonstrating that the instrument does not seem to differentiate populations with and without mild phonological disorder. The inter-evaluator reliability analysis demonstrated that the protocol is easy to analyze and score.
RESUMO
RESUMO Objetivo evidenciar validade de conteúdo e validade de processos de resposta de um instrumento destinado à avaliação fonológica de crianças. Método validade realizada em duas etapas por dois diferentes grupos de juízes, grupo de especialistas e grupo de não-especialistas. O primeiro grupo composto por três juízes especialistas avaliaram os 123 itens lexicais após a elaboração do instrumento, julgando a aplicabilidade das figuras no contexto da avaliação infantil e sugerindo ajustes para compor o conteúdo. A partir das observações, o instrumento foi adequado e direcionado ao grupo de juízes não-especialistas que, por meio da aplicação do instrumento, tiveram suas respostas avaliadas conforme a facilidade ou dificuldade de elicitação dos itens do instrumento. Resultados As avaliações obtiveram resultados de teor positivo para as validades de conteúdo e de processos de resposta. Conclusão o estudo permitiu aprimorar os itens de teste de forma mais criteriosa, beneficiando o uso clínico e científico.
ABSTRACT Purpose to demonstrate the validity of content and the validity of response processes of an instrument intended for the phonological assessment of children. Methods validation was carried out in two stages by two different groups of judges, a group of specialists and a group of non-specialists. The first group, composed of three expert judges, evaluated the 123 lexical items after creating the instrument, judging the applicability of the figures in the context of child assessment, and suggesting adjustments to compose the content. From the observations, the instrument was adapted and directed to the group of non-specialist judges who, through the application of the instrument, had their responses evaluated according to the ease or difficulty of eliciting the instrument's items. Results The predictions obtained positive results for content validity and response processes. Conclusion the study allowed to improve the test items more judiciously, benefiting clinical and scientific use.
RESUMO
The aim of this study was to analyze evidence of convergent and concurrent criterion validity of the scales of the short form of the Jesness Inventory - Revised - Brazilian version. A sample of 597 male adolescents, aged between 12 and 20 years, participated in the study. The evidence of convergent validity obtained indicates that most scales would have maintained their interpretive meaning in the short form. They also indicated the need for further investigations on the Immaturity scale. The concurrent criterion validity suggests that high scores on the scales can differentiate adolescents based on both criteria, Judicialization and Frequency of self-reported delinquency in the last 12 months. Investment in standardized and brief instruments can drive the development of evidence-based practices in the juvenile justice system and, for this, a research agenda is presented.
O objetivo deste estudo foi analisar evidências de validade convergente e de critério concorrente das escalas da versão reduzida do Inventário de Jesness - Revisado Brasileiro. Participaram do estudo 597 adolescentes do sexo masculino, com idades entre 12 e 20 anos. As evidências de validade convergente obtidas indicam que a maioria das escalas teria mantido o seu sentido interpretativo na versão reduzida. Indicaram também a necessidade de mais investigações para a escala de Imaturidade. A validade de critério concorrente sugere que altas pontuações nas escalas são capazes de diferenciar adolescentes com base nos critérios Judicialização e Frequência de delitos autorrevelados nos últimos 12 meses. O investimento em instrumentos padronizados e breves pode impulsionar o desenvolvimento de práticas baseadas em evidências no sistema de justiça juvenil e, para isso, uma agenda de pesquisa é apresentada.
Assuntos
Personalidade , Psicometria , Reprodutibilidade dos TestesRESUMO
Objetivo: Analisar os resultados obtidos na aplicação de um Perfil de Competências a enfermeiros coordenadores de Cursos de Graduação em Enfermagem utilizando recursos estatísticos de validação de constructo. Métodol: Estudo descritivo e metodológico realizado com 44 respondentes entre 2014 e 2015. O Perfil de Competências continha 62 itens distribuídos em três domínios. Resultados: A variância total dos dados nas competências nos domínios educacional, administrativa e individual foi de 74,8%, 76,3% e 75,2% respectivamente. O Coeficiente de Kaiser-Meyer-Olkin variou entre 0,583 e 0,675 e o teste de esfericidade de Bartlett foi de < 0,001. Os domínios do perfil de competências possuem boas correlações e significância a partir das interpretações estatísticas efetuadas garantindo a acreditação do instrumento. Conclusões: O instrumento analisado foi considerado adequado nos três domínios. O uso do perfil pode impactar em carreira dos coordenadores de cursos, favorecendo seu crescimento profissional e consequentemente a qualidade dos cursos que coordenam, bem como auxiliar outros enfermeiros a melhorarem sua performance. (AU)
Objective: To analyze the results obtained in the application of a Profile of competencies to nursing coordinators of graduate program in nursing course using the construct validation statistic resources. Methods: Descriptive and methodological study conducted with 44 respondents between 2014 and 2015. The skills profile contained 62 items distributed in 03 domains. Results: the total data variance in skills in educational, administrative and individual domains was 74,8%, 76,3% and 75,2% respectively. The coefficient of Kaiser-Meyer-Olkin ranged from 0,583 and 0,675 and Bartlett's sphericity test was <0,001. The fields of skills profile have good correlations and significance from the statistical interpretations carried out ensuring the accreditation of the instrument. Conclusion: The instrument was considered adequate in the three domains. The use of the profile can impact the quality of the courses that the nurses coordinators are responsibles and of their own career. (AU)
Objetivo: Analizar los resultados obtenidos en uso de un perfil de competencias para las enfermeras coordinadoras del programa de pregrado en enfermería utilizando las capacidades estadísticas de validación de constructo. Métodos: Estudio descriptivo y metodologico con 44 personas entre 2014 y 2015. El perfil de competencias figura 62 artículos distribuidos en 03 dominios. Resultados: La varianza total de datos de conocimientos en ámbitos educativos, administrativos e individuales era 74,8%, 76,3% y 75,2% respectivamente. El coeficiente de Kaiser-Meyer-Olkin osciló entre 0,583 y 0,675 y prueba de esfericidad de Bartlett fue <0,001. Los campos de perfil de competencias tienen buenas correlaciones y significación de las interpretaciones estadísticas llevadas a cabo asegurando la acreditación del instrumento. Conclusion: El instrumento se consideró adecuado en los tres dominios. El uso del perfil puede reflejar en la calidad de los cursos que los enfermeros coordinadores son responsables y en su carrera. (AU)
Assuntos
Enfermagem , Organização e Administração , Competência Profissional , Pesquisa Metodológica em Enfermagem , Reprodutibilidade dos TestesAssuntos
Saúde Bucal , Autoimagem , Terapêutica , Inquéritos Epidemiológicos , Assistência OdontológicaRESUMO
Abstract Although the Thematic Apperception Test (TAT) is popular in Brazil, showing evidences of its validity remains a challenge. In the present article, we discuss such issue by analyzing the definition of the TAT as a projective method and a psychological test, its use by different theoretical traditions, relations between nomothetic and idiographic analysis levels, limitations of Classical Test Theory for evaluating the instrument's properties, and challenges regarding research and practice with the instrument in Brazil. We advocate that overcoming a traditional view of projective techniques, using multidimensional methods and performing wider empirical studies on norms and validation evidences with multicenter databases may allow more secure and informed practices with the instrument among researchers and practitioners in the country.
Resumo Apesar da popularidade do Teste de Apercepção Temática (TAT) no Brasil, a demonstração de evidências de sua validade ainda permanece um desafio. No presente artigo, discutimos essa questão problematizando a definição do TAT como método projetivo e teste psicológico, abordando seu uso por diferentes correntes teóricas, relações entre os níveis nomotético e idiográfico de análise, limitações da Teoria Clássica dos Testes para avaliar suas propriedades, bem como os desafios na pesquisa e prática com o instrumento no país. Defendemos que superar a visão tradicional sobre as técnicas projetivas, utilizar métodos multidimensionais e realizar estudos empíricos mais amplos (sejam normativos ou de validação, usando bancos de dados multicêntricos) pode assegurar práticas melhor informadas com o instrumento para pesquisadores e profissionais.
RESUMO
Resumo O objetivo deste artigo é verificar a validade e a concordância entre registros em prontuários e autorrelato do uso dos serviços de saúde por idosos usuários da Rede de Atenção à Saúde. Estudo observacional transversal de base populacional. Foram avaliados registros em prontuário e autorrelato de consultas médicas, odontológicas, visitas domiciliares, encaminhamentos para consultas no setor secundário e hospitalizações nos anos de 2015 e 2016. Foram analisados percentuais de concordância, estatística Kappa, sensibilidade, especificidade e valores preditivos para cada um dos itens. O maior percentual de concordância (81,93%) com Kappa significativo (p = 0,03) foi para o item "hospitalização". As consultas odontológicas apresentaram maior Kappa (k = 0,271), significativo (p = 0,01). As análises demonstraram alta especificidade nos registros de hospitalização (83%), e maior sensibilidade para visitas domiciliares (74%). Os valores preditivos positivos foram baixos para hospitalização (8%), e os negativos baixos para consultas médicas (17%), A baixa concordância entre o uso do serviço de saúde autorrelatado e registros em prontuário apontam para uma das possíveis causas da fragmentação da continuidade do cuidado.
Abstract The scope of this article is to verify the validity and consistency of entries in medical records and self-reporting about the use of the health services by elderly users of the Health Care Network. It involved a cross-sectional, population-based observational study. Entries in medical, dental, home visit, referral to the secondary sector and hospitalization appointment records for the years 2015 and 2016 were evaluated. The concordance percentage, Kappa coefficient, sensitivity, specificity and predictive values for each item were also analyzed. The highest concordance percentage (81.93%) with a significant Kappa coefficient (p = 0.03) was for hospitalization. The dentistry appointments revealed a higher Kappa coefficient (k = 0.271) with significance of p=0.01. The analyses showed high specificity in the hospitalization records (83%), and a greater sensitivity for home visits (74%). Positive predictive values were low for hospitalization (8%), and negative predictive values were low for medical appointments (17%). The low concordance between the use of the self-reported health service and entries in medical records highlight one of the possible causes of the fragmentation in continuity of care.
Assuntos
Humanos , Idoso , Prontuários Médicos , Hospitalização , Encaminhamento e Consulta , Aceitação pelo Paciente de Cuidados de Saúde , Estudos TransversaisRESUMO
ABSTRACT The literature has evidenced the need for validation studies of motor tests to assess motor competence (MC). Luz et al (2016) proposed a battery of tests, that is, the Motor Competence Assessment (MCA) to evaluate MC in Portuguese children and adolescents. The purpose of the present study was to investigate the evidences of this MCA validity in a sample of Brazilian preschoolers, in addition to assess the correlation between the MC results obtained through MCA and the Test of Gross Motor Development-2 (TGMD-2). 251 male and female preschool-age children from six reference Centers in Early Childhood Education in the city of João Pessoa-PB participated in study. Data were collected by using MCA and TGMD-2. The results of the Confirmatory Factor Analysis (CFA) showed two models, one of them with appropriate adjustment indexes. The interclass correlation coefficients ranged between 0.77 and 0.96, which indicates an excellent reliability; the correlation between MCA and TGMD-2 was significant with a moderate magnitude (r = 0.57, p <0.01). The structure of three latent variables of the MC construct in the MCA was confirmed by the CFA. However, a two-dimensional model is suggested. MCA and TGMD-2 seemed to measure similar aspects of MC. Reliability enabled us to conclude that the MCA protocol applied to preschoolers maintains temporal stability.
RESUMO A literatura tem evidenciado a necessidade de estudos de validação de testes motores para avaliação da competência motora (CM). Assim, Luz e colaboradores propuseram uma bateria de testes Motor Competence Assessment (MCA) para avaliação da CM em crianças e adolescentes portugueses. Objetivou-se investigar as evidências de validade da MCA em uma amostra de pré-escolares brasileiros e testar a correlação entre resultados da CM avaliados com a MCA e o Test of Gross Motor Development -2 (TGMD-2). Participaram 251 pré-escolares de ambos os sexos, de seis Centros de Referência em Educação Infantil de João Pessoa-PB. Os dados foram coletados por meio da MCA e do TGMD-2. Os resultados da análise fatorial confirmatória (AFC) mostraram dois modelos, um com índices de ajuste adequados; Os coeficientes de correlação interclasse variaram entre 0,77 e 0,96, indicando confiabilidade excelente; a correlação entre a MCA e o TGMD-2 foi significante com magnitude moderada (r = 0,57, p<0,01). A estrutura de três variáveis latentes do construto CM na MCA foi confirmada pela AFC. Entretanto, sugere-se um modelo bidimensional. A MCA e o TGMD-2 parecem medir aspectos semelhantes da CM. A confiabilidade permitiu concluir que o protocolo da MCA aplicado a pré-escolares mantém estabilidade temporal.
Assuntos
Humanos , Masculino , Feminino , Pré-Escolar , Educação Física e Treinamento/métodos , Educação Infantil , Destreza Motora , Desempenho Psicomotor , Criança , LocomoçãoRESUMO
Abstract Objective To assess the psychometric properties of the Medical Outcomes Study Social Support Survey (MOS-SSS) considering a sample of elderly users of the primary healthcare facilities of Ribeirão Preto, state of São Paulo, southeast Brazil. Methods The MOS-SSS is a widely used measurement of social support in different contexts, consisting of 19 items with answer categories that range on a 7-point rating scale. Data collection regarding the psychometric properties of the MOS-SSS was performed in a stratified sample of elderly users of primary healthcare facilities of Ribeirão Preto. Data were collected at five district basic health units located in the city through face-to-face interviews. Polychoric correlation matrix and exploratory (EFA) and confirmatory (CFA) factor analyses were performed. Results A total of 357 elderly subjects aged 60 years or older participated in the study (62.7% females). According to the polychoric correlation matrix, higher coefficients of correlation (> 0.90) were detected among 12 pairs of items and grouped into four factors, as suggested for EFA. The results of the CFA confirmed the construct validity of the four-factor structure of the MOS-SSS when applied to our sample, as well as the stability of this model in distinct subsamples. Conclusion The four-factor structure of the MOS-SSS was found to be suitable and presented adequate construct validity for the assessment of social support in elderly users of primary healthcare facilities.
Resumo Objetivo Avaliar as propriedades psicométricas do Medical Outcomes Study Social Support Survey (MOS-SSS), considerando uma amostra de idosos usuários das unidades de atenção primária à saúde de Ribeirão Preto, São Paulo, sudeste do Brasil. Métodos O MOS-SSS é uma escala para investigação do suporte social amplamente utilizada e aplicável a diferentes contextos. A escala é composta por 19 itens com categorias de respostas que variam em uma escala de 7 pontos. A coleta de dados foi realizada em uma amostra estratificada de idosos usuários de serviços de atenção primária à saúde de Ribeirão Preto. Os dados foram coletados em cinco unidades distritais básicas de saúde (UBDS) do município por meio de entrevistas pessoais. A análise dos dados foi feita utilizando-se matriz de correlações policóricas e análise fatorial exploratória (AFE) e confirmatória (AFC). Resultados Participaram do estudo 357 idosos com 60 anos ou mais (62,7% do sexo feminino). De acordo com a matriz de correlações policóricas, maiores coeficientes de correlação (> 0,90) foram detectados em 12 pares de itens e agrupados em quatro fatores, conforme sugerido pela AFE. Os resultados da AFC confirmaram a validade de construto da estrutura de quatro fatores do MOS-SSS quando aplicado à amostra do estudo, bem como a estabilidade desse modelo em subamostras distintas. Conclusão A estrutura de quatro fatores do MOS-SSS mostrou-se apropriada para a população estudada e apresentou validade de construto adequada para a avaliação do suporte social em idosos usuários de serviços de atenção primária à saúde.
Assuntos
Humanos , Masculino , Feminino , Idoso , Apoio Social , Atenção Primária à Saúde/estatística & dados numéricos , Psicometria , Brasil , Inquéritos e Questionários , Reprodutibilidade dos Testes , Análise Fatorial , Pessoa de Meia-IdadeRESUMO
Abstract Objective Translated and validated outcome instruments are of great importance, since they can be used for researchers studying different populations with the same problem. The objective of the present study was to translate, culturally adapt and validate the Hip Disability and Osteoarthritis Outcome Score (HOOS) into Brazilian Portuguese. Methods The HOOS was translated from English into Brazilian Portuguese, translated back into English, and submitted to an experts committee. It was administered to 100 patients with hip osteoarthritis. The psychometric evaluation included factor analysis; internal reliability measures, test-retest reliability at 7 days, and construct validity comparison with the Brazilian version of the Graded Chronic Pain Scale (GCPS). Results Factor analyses demonstrated a five-factor solution. The test-retest reliability showed a high degree of internal consistency for the five subscales (pain and physical difficulties, 0.97 at baseline and 0.93 at 7 days; pain and difficulty sitting, lying down and getting up, 0.93 at baseline and 0.89 at 7 days; difficulty flexing the knee, 0.92 at baseline and 0.83 at 7 days; difficulty walking, 0.88 at baseline and 0.87 at 7 days; quality of life, 0.80 at baseline and 0.35 at 7 days). The construct validity was established during the comparison of the Brazilian version of the GCPS. Conclusions A Brazilian version of the HOOS was developed with adequate reliability and validity. It will facilitate evaluation of the hip within a large patient population and across cultures.
Resumo Objetivo Escalas traduzidas e validadas são de grande importância, pois podem ser utilizadas por pesquisadores que estudam diferentes populações como mesmo problema. O objetivo do presente estudo foi traduzir, adaptar culturalmente e validar a escala Hip Disability and Osteoarthritis Outcome Score (HOOS) para a língua portuguesa. Métodos O HOOS foi traduzido do inglês para a língua portuguesa, traduzido de volta para o inglês e submetido a um comitê de especialistas. Foi administrado a 100 pacientes com osteoartrite de quadril. A avaliação psicométrica incluiu a análise fatorial; medidas de confiabilidade interna, confiabilidade de teste-reteste em 7 dias e a comparação de validade de conteúdo com a versão brasileira da Escala de Dor Crônica Graduada (GCPS, na sigla em inglês). Resultados A análise fatorial demonstrou uma solução de cinco fatores. A confiabilidade de teste-reteste mostrou um alto grau de consistência interna para as 5 subescalas (dor e dificuldades físicas, 0,97 no 1° dia e 0,93 aos 7 dias; dor e dificuldade em sentar, deitar e levantar, 0,93 no 1° dia e 0,89 aos 7 dias; dificuldade em flexionar o joelho, 0,92 no 1° dia e 0,83 aos 7 dias; dificuldade de caminhada, 0,88 no 1° dia e 0,87 aos 7 dias; qualidade de vida, 0,80 no 1° dia e 0,35 aos 7 dias). A validade de conteúdo foi estabelecida durante a comparação da versão brasileira da GCPS. Conclusões Uma versão brasileira do HOOS foi desenvolvida com confiabilidade e validade adequadas. Isso facilitará a avaliação clínica do quadril em uma grande população de pacientes e entre diferentes culturas.
Assuntos
Brasil , Osteoartrite do Quadril , Reprodutibilidade dos Testes , IdiomaRESUMO
ABSTRACT Objective: To verify the evidence of content validity of the Identifying Issues (Identification questions) elaborated from the theoretical-logical model of the Matrix and the Profile of Professional Competence of the emergency nurse. Method: Descriptive and methodological study of a quantitative approach with a psychometric reference as a precursor in the elaboration of a measurement instrument for the evaluation of competencies. The study was conducted in 2013 in Brazil, with a national sample of nurses specialized in emergency services and/or with professional competence in the area. Three stages were considered: questionnaire development; data collection with Delphi, appropriate statistics for Likert; and interpretative analysis of the comments/suggestions of the analyzed issues. Results: Delphi was used in four stages. There were minor adjustments to the content and inclusion of a new Competence. They obtained 90% of Score Percentage and 98.61 of Content Validity Index. Conclusion: There was consensus among the experts and the research demonstrated evidence of content validity, suggesting pertinence and adequacy to represent the constructs of competencies.
RESUMEN Objetivo: Certificar las evidencias de la validez con base en el contenido de las Cuestiones Identificadoras elaboradas desde el modelo teórico-lógico de la Matriz y del Perfil de Competencia Profesional del enfermero de urgencias. Método: Estudio descriptivo y metodológico de abordaje cuantitativo con referencial psicométrico como precursor en la elaboración de instrumento de medida de la evaluación de las competencias. Realizado en 2013 en Brasil, con muestra nacional de enfermeros expertos en urgencias y/o competencia profesional. Se consideraron tres etapas: la construcción de cuestionario; la recogida de los datos con Delphi, la estadística apropiada para Likert; y el análisis interpretativo de los comentarios/las sugerencias de las cuestiones juzgadas. Resultados: Delphi ocurrió en cuatro etapas. Hubo pequeños arreglos en el contenido y en la inclusión de una nueva Competencia. Obtuvieron el 90% de Porcentual de la Puntuación y 98,61 de Índice de Validez de Contenido. Conclusión: Hubo consenso entre los expertos y la investigación demostró evidencias de validez del contenido, sugiriendo pertinencia y adecuación para representar los constructos de competencias.
RESUMO Objetivo: Verificar as evidências de validade com base no conteúdo das Questões Identificadoras elaboradas a partir do modelo teórico-lógico da Matriz e do Perfil de Competência Profissional do enfermeiro de emergências. Método: Estudo descritivo e metodológico de abordagem quantitativa com referencial psicométrico como precursor na elaboração de instrumento de medida da avaliação das competências. Realizado em 2013 no Brasil, com amostra nacional de enfermeiros experts em emergências e/ou competência profissional. Consideraram-se três etapas: construção de questionário; coleta dos dados com Delphi, estatística apropriada para Likert; e análise interpretativa dos comentários/sugestões das questões julgadas. Resultados: Delphi ocorreu em quatro etapas. Houve pequenos ajustes no conteúdo e na inclusão de uma nova Competência. Obtiveram 90% de Percentual do Escore e 98,61 de Índice de Validade de Conteúdo. Conclusão: Houve consenso entre os experts e a pesquisa demonstrou evidências de validade do conteúdo, sugerindo pertinência e adequação para representar os construtos de competências.
Assuntos
Humanos , Masculino , Feminino , Adulto , Idoso , Competência Profissional/normas , Psicometria/normas , Enfermeiras e Enfermeiros/normas , Psicometria/instrumentação , Psicometria/métodos , Brasil , Inquéritos e Questionários , Reprodutibilidade dos Testes , Técnica Delphi , Serviço Hospitalar de Emergência/normas , Pessoa de Meia-Idade , Enfermeiras e Enfermeiros/tendênciasRESUMO
ABSTRACT Objective: to evaluate the validity of the Competence Scale of Actions of Nurses in Emergencies based on internal structure, internal consistency, and external criteria. Methods: methodological study to verify new evidence of validity of the Scale, with contents previously validated. The Scale has 81 measurable actions at five levels of competence and can be applied both for self- and/or hetero-evaluation. Results: one hundred and forty seven nursing assistants and 41 managers from the five regions of Brazil participated in the study. They were linked to mobile prehospital emergency service, fixed prehospital emergency service, or hospital emergencies. Dimensionality was evidenced by exploratory factorial analysis of the 81 items, pointing out seven factors that explained 66.5% of the total data variance. Cronbach's alpha ranged from 0.79 to 0.98. The Kaiser-Meyer-Olkin 0.988 indicated that the correlations between the items were significant. In the external criterion, Pearson's correlations between hetero-evaluation competence scores and the manager's subjective classification were significant (p < 0.001), as well as differences in the means of these competencies by criterion group. In addition, scores by characteristics were evaluated to detect statistically different means. Conclusion: through the adopted Statistical Procedures, with multi-methods and multi-informants, different psychometric properties were analyzed. A summary of evidence was generated showing that the Scale is valid and reliable.
RESUMO Objetivo: avaliar evidências de validade da Escala de Competências das Ações do Enfermeiro em Emergências com base na estrutura interna, na consistência interna e no critério externo. Métodos: estudo metodológico para verificação de novas evidências de validade da Escala, com conteúdos previamente validados. A Escala com 81 ações mensuráveis em cinco níveis de competências pode ser realizada tanto para o enfermeiro se autoavaliar como outros o avaliarem. Resultados: participaram 407 enfermeiros assistenciais e 41 gestores das cinco regiões do Brasil, atuantes em emergências pré-hospitalar móvel, fixa ou hospitalar. A dimensionalidade foi evidenciada mediante análise fatorial exploratória dos 81 itens, apontando sete fatores que explicaram 66,5% da variância total dos dados. O alfa de Cronbach variou de 0,79 a 0,98. O Kaiser- Meyer-Olkin 0,988 indicou que as correlações entre os itens foram significantes. No critério externo, correlações de Pearson entre escores de competências de heteroavaliação e classificação subjetiva do gestor foram significantes (p<0,001), bem como diferenças das médias dessas competências por grupo critério. Adicionalmente, avaliaram-se escores por características, verificando-se médias estatisticamente distintas. Conclusão: por meio dos Procedimentos Estatísticos adotados, com multimétodos e multi-informantes, analisaram-se diferentes propriedades psicométricas, gerando um sumário de evidências, demostrando que a Escala é válida e confiável.
RESUMEN Objetivo: evaluar evidencias de validez de la Escala de Competencias de las Acciones del Enfermero en Emergencias con base en la estructura interna, en la consistencia interna y en el criterio externo. Métodos: estudio metodológico para verificación de nuevas evidencias de validez de la Escala, con contenidos previamente validados. La Escala con 81 acciones mensurables en cinco niveles de competencias puede ser realizada tanto para que el enfermero se autoevalúe como otros lo evalúen. Resultados: participaron 407 enfermeros asistenciales y 41 gestores de las cinco regiones de Brasil, actuantes en emergencias pre-hospitalaria móvil, fija o hospitalaria. La dimensionalidad fue evidenciada mediante análisis factorial exploratoria de los 81 ítems, apuntando siete factores que explicaron 66,5% de la variancia total de los datos. El alfa de Cronbach varió de 0,79 a 0,98. El Kaiser- Meyer-Olkin 0,988 indicó que las correlaciones entre los ítems fueron significantes. En el criterio externo, correlaciones de Pearson entre puntajes de competencias de heteroevaluación y clasificación subjetiva del gestor fueron significantes (p<0,001), así como diferencias de las medias de esas competencias por grupo criterio. Adicionalmente, se evaluaron puntajes por características, verificándose medias estadísticamente distintas. Conclusión: por medio de los Procedimientos Estadísticos adoptados, con multimétodos y multiinformantes, se analizaron diferentes propiedades psicométricas, generando un sumario de evidencias, demostrando que la Escala es válida y confiable.
Assuntos
Humanos , Enfermagem em Emergência/organização & administração , Avaliação de Desempenho Profissional/organização & administração , Escala de Avaliação Comportamental/estatística & dados numéricos , Competência Profissional , Psicometria/estatística & dados numéricosRESUMO
Abstract The aim of this study is to analyze the psychometric properties and to examine the factorial validity of the Portuguese version of the Questionnaire Assessing School Physical Activity Environment (Q-SPACE) for school-age youth. The translated and adapted version of the questionnaire was applied and resulted in two studies: study I, in which 504 students participated (56% boys), the factorial structure of the scale was examined; in study II, which involved 501 students (53.5% boys), the factorial structure obtained in study I was tested through confirmatory factor analysis. The results of the exploratory factorial analysis, carried out in study I, showed that the Portuguese version of the Q-SPACE is composed of five factors that characterize the students' perception regarding the social and physical school environment for physical activity: equipment and space conditions; recess; school social support; physical education structure; school activity offer. Internal consistency values ranged from 0.60 to 0.89. The confirmatory factor analysis confirmed the applicability of the Portuguese Q-SPACE version, presenting adequate fit indexes: χ2/df = 2.90, GFI = 0.92; CFI = 0.92; RMSEA = 0.06. In conclusion, Q-SPACE showed acceptable validity and reliability for assessing school physical activity environment in Portuguese adolescents.
Resumo O objetivo deste estudo é analisar as propriedades psicométricas e examinar a validade fatorial da versão portuguesa do instrumento "Questionnaire Assessing School Physical Activity Environment" (Q-SPACE) para jovens em idade escolar. A versão traduzida e adaptada da escala foi aplicada e resultaram dois estudos: no estudo I, em que participaram 504 estudantes (56% eram rapazes), foi examinada a estrutura fatorial da escala; no estudo II, em que participaram 501 estudantes (53.5% eram rapazes), foi testada a estrutura fatorial obtida no estudo I através da análise fatorial confirmatória. O resultado da análise fatorial exploratória, efetuada no estudo I, demonstrou que a versão portuguesa da escala Q-SPACE é constituída por cinco fatores que caraterizam a perceção dos estudantes relativamente ao ambiente social e físico escolar para a prática de atividade física: condições dos espaços e material; intervalos; suporte social escolar; organização da educação física; diversidade de atividades. Os valores de consistência interna variaram entre 0.60 e 0.89. A análise fatorial confirmatória, comprovou a aplicabilidade da versão portuguesa do Q-SPACE, apresentando adequados índices de ajustamento: χ2/df = 2.90, GFI = 0.92; CFI = 0.92; RMSEA = 0.06. Em conclusão, a escala Q-SPACE demonstrou uma validade e fiabilidade adequadas para avaliar a perceção do ambiente escolar para a prática de atividade física em adolescentes portugueses.
Assuntos
Humanos , Masculino , Feminino , Criança , Adolescente , Instituições Acadêmicas , Inquéritos e Questionários/normas , Reprodutibilidade dos Testes , Atividade MotoraRESUMO
ABSTRACT The prevention of cardiovascular events is one of the main objectives of a preexercise screening questionnaire. The aim of this study was to evaluate the diagnostic validity of ACSM/AHA questionnaire (AAPQ), through the Sensitivity (Se), Specificity (Sp) and AUC (area under the curve). The study included 69 subjects (40-81 years). Comparisons between sex and age categories were performed. There was no significant difference. However, the variation in positive responses seemed to increase in percentage terms, especially after 60 years (from 78.6% to 100%). The AAPQ Se values were high (88.2%) suggesting that the majority of individuals in whom the instrument was positive showed some contraindication. However, the Sp value was only 13.5%, indicating that the questionnaire was not able to identify those with no contra indication to start an exercise program. Thus, the instrument would have a low diagnostic capacity (AUC = 0.51). The results suggest that the questionnaire presents a low capacity to identify individuals suitable for inclusion in an exercise program.
RESUMO A prevenção de eventos cardiovasculares é um dos principais objetivos de um questionário de triagem para a prática de exercícios. O objetivo do estudo foi verificar a validade diagnóstica do questionário do ACSM/AHA (AAPQ), através da sensibilidade (SE) e especificidade (ES), e AUC (área sob a curva). Participaram do estudo 69 indivíduos (40 a 81 anos). Comparações entre sexo e categorias de idade foram realizadas. Não foi verificada diferença significativa. Contudo, a variação nas respostas positivas pareceu aumentar percentualmente, principalmente a partir dos 60 anos (de 78,6% a 100%). Os valores de SE do AAPQ foram altos (88,2%), sugerindo que grande parte dos indivíduos em que o resultado do instrumento foi positivo apresentava alguma contraindicação. Contudo, o valor da ES foi de apenas 13,5%, indicando que o questionário não foi capaz de identificar aqueles indivíduos sem contraindicação ao início de um programa de exercícios. Com isso, o instrumento teria uma baixa capacidade diagnóstica (AUC=0,51). Os resultados sugerem que o questionário apresenta baixa capacidade em identificar indivíduos aptos a iniciar um programa de exercícios.
Assuntos
Humanos , Reprodutibilidade dos Testes , Teste de Esforço , Atividade Motora , Medicina Esportiva , Inquéritos e Questionários , Fatores de Risco , DiagnósticoRESUMO
Objetivo: Avaliar se um compilado breve de instrumentos de triagem, para transtornos mentais específicos, pode detectar transtornos mentais e emocionais na população geral. Método: Foram selecionados instrumentos de triagem validados para os transtornos mentais e emocionais mais prevalentes. Como critério de seleção, esses instrumentos deveriam manter as propriedades psicométricas do instrumento completo com apenas um ou alguns itens. Os instrumentos selecionados foram: o Patient Health Questionnaire-2 (PHQ-2), o Generalized Anxiety Disorder Scale-2 (GAD-2), o item 3 do Alcohol Use Disorders Identification Test (AUDIT), e três itens do Adolescent Psychotic-Like Symptom Screener (APSS-3). Esse compilado de instrumentos de triagem foi chamado de Mini Rastreio para Transtornos Mentais (Mini-RTM). O estudo foi dividido em duas fases: na primeira, 545 sujeitos foram entrevistados com o instrumento de triagem Mini-RTM e COOP/WONCA-Sentimentos em suas residências; na segunda fase, os sujeitos que concordaram em participar (230) foram entrevistados com o Mini-RTM, COOP/WONCA-Sentimentos e a entrevista diagnóstica MINI. A confiabilidade teste-reteste foi calculada pelo Coeficiente de Correlação Intraclasse (ICC). A área sob a curva ROC foi gerada para a análise da validade discriminativa. A validade concorrente foi calculada pela análise da correlação entre o Mini-RTM e o COOP/WONCA-Sentimentos. Resultados: A administração conjunta dos instrumentos de triagem para transtornos específicos mostrou sensibilidades que variaram de 0,76 a 0,88 e especificidades que variaram de 0,67 a 0,85. O valor do ICC para o escore total do Mini-RTM foi de 0,78. A área sob a curva para a detecção dos transtornos mentais foi de 0,84, com sensibilidade de 0,74 e especificidade de 0,76 (ponto de corte ≥ 4). Conclusão: Esse estudo mostrou que um compilado breve de instrumentos de rastreio para transtornos mentais específicos (Mini-RTM) pode detectar transtornos mentais e emocionais na população geral.
Objective: To evaluate whether a short compilation of screening tools for specific disorders could identify Mental or Emotional Disorders (MEDs) in the general population. Methods: We selected validated screening tools for the most prevalent MEDs. In order to be selected, these tools should maintain the psychometric properties of the complete instrument with a reduced number of items. These instruments were: Patient Health Questionnaire-2 (PHQ-2), Generalized Anxiety Disorder Scale-2 (GAD-2), item 3 of the Alcohol Use Disorders Identification Test (AUDIT), and three items on the Adolescent Psychotic-Like Symptom Screener (APSS-3). We called this compilation of screening tools Mini Screening for Mental Disorders (Mini-SMD). The study was divided in two phases. Firstly, 545 subjects were interviewed with the Mini-SMD and COOP/WONCA-Feelings at their residences. Subsequently, subjects who had agreed to participate (230) were reinterviewed with Mini-SMD, COOP/ WONCA-Feelings and MINI interview. Test-retest reliability was calculated by Intraclass Correlation Coefficient (ICC). Receiver operating characteristic (ROC) curves were generated for the analysis of discriminative validity. Concurrent validity was calculated by analyzing the correlation between Mini-SMD and COOP/WONCA-Feelings. Results: The joint administration of screening tools for specific disorders showed sensitivities that ranged from 0.76 to 0.88 and specificities from 0.67 to 0.85. The ICC value for the total score of Mini-SMD was 0.78. The area under the curve was 0.84, with a sensitivity of 0.74 and specificity of 0.76 (for a cutoff ≥ 4). Conclusion: This study showed that a short compilation of screening tools for specific disorders can detect MEDs in general population.
Objetivo: Evaluar si un breve compilado de herramientas de detección para trastornos mentales específicos puede detectar los trastornos mentales y emocionales en la población general. Método: Herramientas de detección validadas para los trastornos emocionales y mentales más frecuentes han sido seleccionadas. Como criterios de selección, estas herramientas deberían mantener las propiedades psicométricas del instrumento completo con sólo uno o pocos elementos. Las herramientas seleccionadas fueron: el Patient Health Questionnaire-2 (PHQ-2), el Generalized Anxiety Disorder Scale-2 (GAD-2), el elemento 3 del Alcohol Use Disorders Identification Test (AUDIT) y tres elementos del Adolescent Psychotic-Like Symptom Screener (APSS-3). Este compilado de herramientas de detección ha sido denominado el Mini Detección para Trastornos Mentales (Mini-DTM). El estudio se dividió en dos etapas. En la primera etapa, 545 sujetos fueron entrevistados en sus residencias con la herramienta de detección Mini-DTM y COOP/WONCA-Sentimientos. En la segunda etapa, a los sujetos que aceptaron participar (230) se entrevistaron con el Mini-DTM, COOP/WONCASentimientos y la entrevista diagnóstica MINI. La fiabilidad evaluar/revaluar fue calculada mediante el Coeficiente de Correlación Intraclase (ICC). La Curva ROC (Receiver Operating Characteristic) fue generada para el análisis de la validez discriminante. La validez concurrente se calculó mediante el análisis de la correlación entre el Mini-DTM y el COOP/WONCA-Sentimientos. Resultados: La administración conjunta de las herramientas de detección para trastornos específicos mostró sensibilidades que oscilaron de 0,76 a 0,88 y especificidades que oscilaron de 0,67 a 0,85. El valor del ICC para la puntuación total del Mini-DTM fue 0,78. El área bajo la curva para la detección de trastornos mentales fue 0,84, con una sensibilidad de 0,74 y especificidad de 0,76 (punto de corte ≥ 4). Conclusión: Este estudio demostró que un breve compilado de herramientas de detección para trastornos mentales específicos (Mini-DTM) puede detectar trastornos mentales y emocionales en la población general.
Assuntos
Humanos , Masculino , Feminino , Adolescente , Adulto , Pessoa de Meia-Idade , Atenção Primária à Saúde , Programas de Rastreamento , Reprodutibilidade dos Testes , Transtornos MentaisRESUMO
RESUMO Objetivos: Identificar estudos que avaliam as propriedades psicométricas dos principais testes de capacidade funcional utilizados em crianças e adolescentes e verificar os testes que apresentam propriedades de mensuração satisfatórias. Fontes de dados: Pesquisa nas bases de dados MEDical Literature Analysis and Retrieval System Online (MEDLINE), Cumulative Index to Nursing and Allied Health Literature (CINAHL) e Scientific Electronic Library Online (SciELO), sem limitar o período ou idiomas. Dois investigadores selecionaram de forma independente os artigos com base nos critérios de inclusão: estudos que avaliaram propriedades psicométricas dos testes de capacidade funcional em crianças e/ou adolescentes saudáveis ou com doenças cardiorrespiratórias. Foram excluídas pesquisas que incluíram indivíduos adultos e/ou participantes com doenças neurológicas e estudos que exclusivamente estabeleceram valores de referência ou equações de predição. Síntese dos dados: Do total de 677 artigos, foram selecionados 11 compatíveis com o tema; destes, 7 avaliaram propriedades psicométricas do teste de caminhada de 6 minutos (TC6), 1 avaliou tanto o TC6 quanto o teste do degrau de 3 minutos (TD3), e 3 avaliaram o teste incremental Shuttle Walk Test (ISWT). As evidências sobre as propriedades de reprodutibilidade e confiabilidade são boas para o TC6 e ISWT e moderadas para o TD3. O ISWT mostra medidas de validade altas para crianças saudáveis e para aquelas com doença respiratória crônica. As medidas de validade do TC6 variam entre as populações estudadas e devem ser consideradas de maneira particular para cada condição de doença. A validade do TD3 ainda deve ser esclarecida na população pediátrica. Conclusões: O TC6 apresenta maior número de investigações sobre suas propriedades, mas sua validade apresenta variabilidade para diferentes populações pediátricas. A capacidade dos testes TC6, ISWT e TD3 de mensurar mudanças clinicamente importantes em crianças e adolescentes com doenças cardiorrespiratórias é desconhecida.
ABSTRACT Objectives: To identify studies that evaluated psychometric properties of functional capacity tests in children and adolescents, and to verify which of these have satisfactory properties of measurement. Data sources: Searches on MEDical Literature Analysis and Retrieval System Online (MEDLINE), Cumulative Index to Nursing and Allied Health Literature (CINAHL) and Scientific Electronic Library Online (SciELO) databases without limiting period or language. Two investigators independently selected articles based on the following inclusion criteria: children and/or adolescent population (healthy or with cardiorespiratory diseases); and assessment of psychometric properties of functional capacity tests. Studies with (I) adult samples, (II) sample with neurological diseases, and (III) on reference values or prediction equations only were excluded. Data synthesis: From the total of 677 articles identified, 11 were selected. These evaluated the psychometric properties of the following tests: 6-minute walk test (6MWT) (n=7); 6MWT and the 3-minute step test (3MST) (n=1); and Incremental Shuttle Walk Test (ISWT) (n=3). Reproducibility and reliability were good for 6MWT and ISWT, and moderate for 3MST. The ISWT showed high validity measures for both healthy children and children with chronic respiratory disease. The validity of 6MWT varied across studies, and should be analyzed according to the health conditions of test takers. The validity of 3MST is unclear, and further studies in pediatric population are required. Conclusions: Most studies investigated 6MWT measurement properties. Validity of 6MWT varied according to different pediatric populations. The use of 6MWT, ISWT and 3MST tests to measure clinically important changes in children and adolescents with cardiorespiratory diseases is still unclear.
Assuntos
Humanos , Criança , Adolescente , Teste de Esforço , Psicometria , Reprodutibilidade dos TestesRESUMO
ABSTRACT Objective: To create an instrument to assess the professional competence of nurses in emergencies. Method: Methodological study carried out between 2013 and 2016 in a Brazilian university. We used the Pasquali's model and Psychometrics as references because they allow subjective phenomena to be measured. The survey covered defining steps of the behavior to be measured, the formulation of the items in the instrument, development of instructions for using the instrument and elements necessary to demonstrate validity evidence. Although we have previously performed, in a distinct and consecutive way, the literature review, definition of the Core (or Matrix) Competence and the Competence Profile, and identification of validity with Delphi, essential components to structure a technology, in this step we continued the conclusion of these Theoretical Procedures. Result: We created an instrument for self- and/or hetero-evaluation containing: personal/professional/academic characterization, Competency Scale, fictitious cases and actions representing the practice. Conclusion: We created a new soft-hard technology based on the validity evidence of contents according to experts of the five regions of Brazil.
RESUMEN Objetivo: Crear Instrumento de Evaluación de la Competencia Profesional del Enfermero en Urgencias. Método: Estudio metodológico realizado entre 2013 y 2016 en universidad brasileña. Se utilizó el modelo de Pasquali y la Psicometría como referenciales, pues permiten que fenómenos subjetivos sean medidos. La investigación abarcó etapas de definición del comportamiento a ser medido, la formulación de los ítems de la herramienta, desarrollado de instrucciones para el uso del instrumento y de elementos necesarios para demostrar evidencias de validez. Aunque ya haya sido realizada previamente de manera distinta y consecutiva la revisión de la literatura, la definición de la Matriz y del Perfil de Competencias e identificación de validez con Delphi, los componentes esenciales para estructurar una tecnología, se dio continuidad a la finalización de esos Procedimientos Teóricos en esta etapa. Resultado: Instrumento creado para auto y/o heteroevaluación conteniendo: la caracterización personal/profesional/académica, la Escala de Competencias, los casos ficticios y las acciones representativas de la práctica. Conclusión: Se construyó una tecnología blanda-dura novedosa basada por las evidencias de validez del contenido consensuado por expertos de las cinco regiones de Brasil.
RESUMO Objetivo: Criar Instrumento de Avaliação da Competência Profissional do Enfermeiro em Emergências. Método: Estudo metodológico realizado entre 2013 e 2016 em universidade brasileira. Usou-se o modelo de Pasquali e a Psicometria como referenciais, permitindo que fenômenos subjetivos sejam medidos. A pesquisa abrangeu etapas de definição do comportamento a ser medido, formulação dos itens da ferramenta, desenvolvimento de instruções para uso do Instrumento e de elementos necessários para demonstrar evidências de validade. Embora realizadas previamente de forma distinta e consecutiva revisão da literatura, definição da Matriz e do Perfil de Competências e identificação de validade com Delphi, componentes essenciais para estruturar uma tecnologia, deu-se continuidade à finalização desses Procedimentos Teóricos nesta etapa. Resultado: Instrumento criado para auto e/ou heteroavaliação contendo: caracterização pessoal/profissional/acadêmica, Escala de Competências, casos fictícios e ações representativas da prática. Conclusão: Construiu-se tecnologia leve-dura inédita alicerçada pelas evidências de validade do conteúdo consensuado por experts das cinco regiões brasileiras.
Assuntos
Humanos , Competência Profissional , Avaliação de Recursos Humanos em Saúde , Psicometria , Brasil , Avaliação de Desempenho Profissional , Avaliação de Programas e Instrumentos de PesquisaRESUMO
O objetivo desta revisão foi recuperar e sumarizar os estudos que avaliaram as propriedades psi-cométricas (validade, confiabilidade e responsividade) de questionários utilizados para mensurar a atividade física (AF) em adolescentes. Trata-se de uma revisão sistemática realizada de acordo com o protocolo PRISMA. A busca foi realizada nas bases de dados: MEDLINE (via Ovid), CINAHL, LILACS, Cochrane, SciELO, PsycINFO, Web of Science e SPORTDiscus, utilizando descritores específicos. O risco de viés foi avaliado por meio do Checklist COSMIN. Foram incluídos 26 estu-dos na revisão e, destes, apenas cinco foram realizados no Brasil. A qualidade dos estudos variou de fraca a boa. Dos 25 questionários que foram avaliados quanto à confiabilidade teste-reteste, 11 apre-sentaram coeficientes de correlação intraclasse ≥ 0,70, incluindo o Questionário de Atividade Física para Adolescentes (QAFA). No que se refere à validade, apenas um dos 32 questionários avaliados quanto a esta propriedade apresentou coeficiente de correlação ≥ 0,70 e cinco apresentaram coefi-cientes de magnitude moderada (0,56 a 0,69), sendo dois de nacionalidade brasileira. Porém, ambos foram comparados a medidas subjetivas de AF. A responsividade dos questionários não foi avaliada em nenhum dos estudos. Os questionários de AF incluídos nesta revisão apresentaram melhores índices de confiabilidade do que validade e não foram investigados quanto à sua responsividade. Esses resultados reforçam a necessidade de realização de novos estudos com qualidade metodológica mais adequada, que investiguem principalmente a validade e a responsividade desses instrumentos
The aim of this review was to retrieve and identify studies that evaluated the psychometric properties (va-lidity, reliability and responsiveness) of questionnaires used to measure physical activity (PA) in adolescents. It is a systematic review carried out according to the PRISMA protocol. Searches were performed in: MED-LINE (via Ovid), CINAHL, LILACS, Cochrane, SciELO, PsycINFO, Web of Science and SPORTDiscus, using specific terms. The risk of bias was assessed through the COSMIN Checklist. Twenty-six studies were included in the review, of which only five were performed in Brazil. The quality of the studies ranged from poor to good. Of the 25 instruments that were evaluated for test-retest reliability, 11 presented intraclass correlation coefficients ≥ 0.70, including the Physical Activity Questionnaire for Adolescents (QAFA). Re-garding validity, only one instrument of the 32 evaluated for this property presented coefficient correlation ≥ 0.70 and five presented coefficients of moderate magnitude (0.56 a 0.69), two of them from Brazil. How-ever, both were compared to subjective criterion measures. The responsiveness of the questionnaires was not assessed in any of the studies. The PA questionnaires included in this review had better reliability indexes than validity and were not investigated for their responsiveness. These results reinforce the need to carry out new studies with more adequate methodological quality that investigate mainly the validity and respon-siveness of these instruments
Assuntos
Reprodutibilidade dos Testes , Adolescente , Atividade MotoraRESUMO
Abstract The validation of this questionnaire is an important tool for analyzing theknowledge and skills of coaches, as well as a better understanding of their practice context. Therefore, the aim of the present study was to establish the content validity of the Coaches' Knowledge and Competence Questionnaire (CKCQ). Five specialists with doctorate degree for at least 10 years, academic experience and periodicity of publications with the theme in national and international journals participated in the validation process. Specialists evaluated 38 items of the questionnaire and assigned a score on a 1-5 point likert scale for each item in the language clarity, practical pertinence and theoretical relevance criteria. The content validity coefficient (CVC) was used to determine the CVCI of items and the CVCt of the total instrument of each criterion, adopting cutoff point of 0.81. The approximate results found for language clarity (0.92), practical pertinence (0.99) and theoretical relevance (0.98) presented values considered almost perfect and appropriate for validation. The content validation of the CKCQ is an important alternative for the evaluation of the knowledge and competences of sports coaches.
Resumo A validação do presente questionário apresenta-se como importante ferramenta para a análise dos conhecimentos e competências de treinadores, bem como melhor entendimento de seu contexto de prática. Para tanto, o objetivo do presente estudo foi estabelecer a validade de conteúdo do Questionário acerca dos Conhecimentos e Competências Funcionais do Treinador Esportivo (QCCT). Participaram do processo de validação cinco especialistas com titulação de doutor há pelo menos 10 anos, experiência acadêmica e periodicidade de publicações com a temática em revista nacionais e internacionais. Os especialistas avaliaram 38 itens do questionário e atribuíram uma nota em uma escala likert de um a cinco para cada item nos critérios de clareza de linguagem, pertinência prática e relevância teórica. Fez-se o uso do coeficiente de validade (CVC) para determinação do CVCI dos itens e o CVCt do total do instrumento de cada critério, adotando como ponto de corte 0,81. Os resultados aproximados encontrados para clareza de linguagem (0,92), pertinência prática (0,99) e relevância teórica (0,98) apresentaram valores considerados quase perfeitos e apropriados para sua validação. A partir da validação do conteúdo, o QCCT mostra-se como uma importante alternativa para a avaliação dos conhecimentos e competências dos treinadores esportivos.