Clinical validity and intrarater and test-retest reliability of the Structured Clinical Interview for DSM-5 - Clinician Version (SCID-5-CV).

AIM: The Structured Clinical Interview for the DSM is one of the most used diagnostic instruments in clinical research worldwide. The current Clinician Version of the instrument (SCID-5-CV) has not yet been assessed in respect to its psychometric qualities. We aimed to assess the clinical validity and different reliability indicators (interrater test-retest, joint interview, face-to-face vs telephone application) of the SCID-5-CV in a large sample of 180 non-prototypical and psychiatric patients based on interviews conducted by raters with different levels of clinical experience. METHODS: The SCID-5-CV was administered face-to-face and by telephone by 12 psychiatrists/psychologists who took turns as raters and observers. Clinical diagnoses were established according to DSM-5 criteria and the longitudinal, expert, all data (LEAD) procedure. We calculated the percentage of agreement, diagnostic sensitivity and specificity, and the level of agreement (kappa) for diagnostic categories and specific diagnoses. RESULTS: The percentage of positive agreement between the interview and clinical diagnoses ranged between 73% and 97% and the diagnostic sensitivity/specificity were >0.70. In the joint interview, the levels of positive agreement were high (>75%) and kappa levels were >0.70 for most diagnoses. The values were less expressive, but still adequate, for interrater test-retest interviews. CONCLUSION: The SCID-5-CV presented excellent reliability and high specificity as assessed with different methods. The clinical validity of the instrument was also confirmed, which supports its use in daily clinical practice. We highlight the adequacy of the instrument to be used via telephone and the need for careful use by professionals with little experience in psychiatric clinical practice.

Evidências de validade da escala de avaliação de ansiedade em adolescentes brasileiros / Evidence of validity of the assessment scale for anxiety in Brazilian adolescents / Evidencias de validez de la escala de evaluación de ansiedad en adolescentes brasileño

A ansiedade apresenta indicadores relacionados com marcadores somáticos, motores e cognitivos. Embora o interesse na investigação da regulação da ansiedade seja evidente entre pesquisadores, a oferta de instrumentos validados ainda é restrita. O objetivo deste artigo é apresentar o estudo de validade de critério da escala de avaliação de ansiedade em adolescentes. Houve a seleção de dois grupos-critério: um grupo clínico de 62 adolescentes com diagnóstico psiquiátrico (Transtorno de Ansiedade Generalizada, Fobia Social, Fobia Específica ou Transtorno de Pânico) e outro de 23 adolescentes escolares indicados pelos professores por apresentarem comportamentos relacionados à ansiedade. Análises de follow up revelaram que todos os grupos comparados tiveram diferenças. O grupo II apresentou mais indicativos de desajustamento psicológico (ansiedade) do que a amostra comunitária e menos do que a amostra clínica. Os resultados demonstram evidências de validade de critério da Escala de Avaliação de Ansiedade para Adolescentes por grupos critérios.

Anxiety presents indicators related to somatic, motor and cognitive markers. Although interest in the investigation of regulation of anxiety is evident among researchers, the supply of validated instruments is still restricted. The purpose of this paper is to present the study to determine criterion validity of the scale for evaluation of anxiety in adolescents. Two criterion-groups were selected: a clinical group of 62 adolescents with psychiatric diagnosis (Generalized Anxiety Disorder, Social Phobia, Specific Phobia or Panic Disorder) and a group of 23 teenage students indicated by teachers forhaving anxiety related behaviors. Follow up analyzes revealed that all comparison groups presented differences. Group II presents more indicative of psychological problems (anxiety) than the community sample and less than the clinical sample. The results show evidence of criterion validity of the Anxiety Evaluation Scale for Adolescents based on comparing scores on criterion groups.

La ansiedad presenta indicadores relacionados con marcadores somáticos, motores y cognitivos. Si bien el interés en la investigación de la regulación de la ansiedad sea evidente entre investigadores, el suministro de instrumentos validados es aún limitado. El objetivo de este artículo es presentar el estudio de validez de criterio de la escala de evaluación de ansiedad en adolescentes. Se sucedió a la selección de dos grupos-criterio: un grupo clínico de 62 adolescentes con diagnóstico psiquiátrico (Trastorno de Ansiedad Generalizada, Fobia Social, Fobia Específica o Trastorno de Pánico) y otro de 23 adolescentes escolares indicados por profesores por presentaren comportamientos relacionados a la ansiedad. Análisis de follow up revelaron que todos grupos comparados tuvieron diferencias. El grupo II presento más indicativos de desajuste psicológico (ansiedad) que la muestra comunitaria y menos que la muestra clínica. Los resultados demostraron evidencias de validez de criterio para la Escala de Evaluación de Ansiedad para Adolescentes por grupos criterios.

Evidências de validade da escala de avaliação de ansiedade em adolescentes brasileiros / Evidence of validity of the assessment scale for anxiety in Brazilian adolescents

A ansiedade apresenta indicadores relacionados com marcadores somáticos, motores e cognitivos. Embora o interesse na investigação da regulação da ansiedade seja evidente entre pesquisadores, a oferta de instrumentos validados ainda é restrita. O objetivo deste artigo é apresentar o estudo de validade de critério da escala de avaliação de ansiedade em adolescentes. Houve a seleção de dois grupos-critério: um grupo clínico de 62 adolescentes com diagnóstico psiquiátrico (Transtorno de Ansiedade Generalizada, Fobia Social, Fobia Específica ou Transtorno de Pânico) e outro de 23 adolescentes escolares indicados pelos professores por apresentarem comportamentos relacionados à ansiedade. Análises de follow up revelaram que todos os grupos comparados tiveram diferenças. O grupo II apresentou mais indicativos de desajustamento psicológico (ansiedade) do que a amostra comunitária e menos do que a amostra clínica. Os resultados demonstram evidências de validade de critério da Escala de Avaliação de Ansiedade para Adolescentes por grupos critérios.(AU)

Anxiety presents indicators related to somatic, motor and cognitive markers. Although interest in the investigation of regulation of anxiety is evident among researchers, the supply of validated instruments is still restricted. The purpose of this paper is to present the study to determine criterion validity of the scale for evaluation of anxiety in adolescents. Two criterion-groups were selected: a clinical group of 62 adolescents with psychiatric diagnosis (Generalized Anxiety Disorder, Social Phobia, Specific Phobia or Panic Disorder) and a group of 23 teenage students indicated by teachers forhaving anxiety related behaviors. Follow up analyzes revealed that all comparison groups presented differences. Group II presents more indicative of psychological problems (anxiety) than the community sample and less than the clinical sample. The results show evidence of criterion validity of the Anxiety Evaluation Scale for Adolescents based on comparing scores on criterion groups.(AU)

La ansiedad presenta indicadores relacionados con marcadores somáticos, motores y cognitivos. Si bien el interés en la investigación de la regulación de la ansiedad sea evidente entre investigadores, el suministro de instrumentos validados es aún limitado. El objetivo de este artículo es presentar el estudio de validez de criterio de la escala de evaluación de ansiedad en adolescentes. Se sucedió a la selección de dos grupos-criterio: un grupo clínico de 62 adolescentes con diagnóstico psiquiátrico (Trastorno de Ansiedad Generalizada, Fobia Social, Fobia Específica o Trastorno de Pánico) y otro de 23 adolescentes escolares indicados por profesores por presentaren comportamientos relacionados a la ansiedad. Análisis de follow up revelaron que todos grupos comparados tuvieron diferencias. El grupo II presento más indicativos de desajuste psicológico (ansiedad) que la muestra comunitaria y menos que la muestra clínica. Los resultados demostraron evidencias de validez de criterio para la Escala de Evaluación de Ansiedad para Adolescentes por grupos criterios.(AU)

Validade clínica / Clinical validity

Desenvolvemos o conceito de validade clínica, contextualizando as limitações de validade dos instrumentos e procedimentos de avaliação psicológica. Argumentamos que a validade de um indicador na abordagem nomotética é estabelecida no processo de atribuição de significados a ele, que são derivados de sua associação com as teorias e outros indicadores. Este processo de atribuição de significados é fundamentalmente qualitativo, semelhante ao processo de construção teórica. Demonstramos como a validade não é uma propriedade dos instrumentos ou procedimentos, mas do processo de associações qualitativas inferidas com base em relações observadas. Conceituamos a validade clínica mostrando a necessidade de buscar formas de estimar a validade das informações para cada sujeito singular. Apresentamos então critérios para validade clínica, fundamentando-os na articulação das informações que tomam o sujeito, seu contexto e sua história pessoal como parâmetros.

This paper presents the concept of clinical validity in the context of the limitations in the validity of psychological assessment instruments and procedures. It argues that the validity of an indicator in the nomothetic approach is established in the process of attributing meanings to it, derived from its association with related indicators and theories. This process of attributing meanings is fundamentally qualitative, similar to the process of theoretical construction. It demonstrates that validity is not a property of instruments or procedures, but of the process of qualitative associations inferred from observed relationships. It presents a concept for clinical validity showing the need to search for ways to estimate the validity of information for each subject. The criteria for clinical validity are presented, based on the articulation of information that takes the subject and his or her personal context and history as reference.