Enhancing Content Validity Assessment With Item Response Theory Modeling / Mejorando la Evaluación de la Validez del Contenido a Través del Modelado de la Teoría de Respuesta al Ítem

Background: Ensuring the validity of assessments requires a thorough examination of the test content. Subject matter experts (SMEs) are commonly employed to evaluate the relevance, representativeness, and appropriateness of the items. This article proposes incorporating item response theory (IRT) into model assessments conducted by SMEs. Using IRT allows for the estimation of discrimination and threshold parameters for each SME, providing evidence of their performance in differentiating relevant from irrelevant items, thus facilitating the detection of suboptimal SME performance while improving item relevance scores. Method: Use of IRT was compared to traditional validity indices (content validity index and Aiken’s V) in the evaluation of conscientiousness items. The aim was to assess the SMEs’ accuracy in identifying whether items were designed to measure conscientiousness or not, and predicting their factor loadings. Results: The IRT-based scores effectively identified conscientiousness items (R2 = 0.57) and accurately predicted their factor loadings (R2 = 0.45). These scores demonstrated incremental validity, explaining 11% more variance than Aiken’s V and up to 17% more than the content validity index. Conclusions: Modeling SME assessments with IRT improves item alignment and provides better predictions of factor loadings, enabling improvement of the content validity of measurement instruments.(AU)

Antecedentes: Garantizar la validez de evaluaciones requiere un examen exhaustivo del contenido de una prueba. Es común emplear expertos en la materia (EM) para evaluar la relevancia, representatividad y adecuación de los ítems. Este artículo propone integrar la teoría de respuesta al ítem (TRI) en las evaluaciones hechas por EM. La TRI ofrece parámetros de discriminación y umbral de los EM, evidenciando su desempeño al diferenciar ítems relevantes/ irrelevantes, detectando desempeños subóptimos, mejorando también la estimación de la relevancia de los ítems. Método: Se comparó el uso de la TRI frente a índices tradicionales (índice de validez de contenido y V de Aiken) en ítems de responsabilidad. Se evaluó la precisión de los EM al discriminar si los ítems medían responsabilidad o no, y si sus evaluaciones permitían predecir los pesos factoriales de los ítems. Resultados: Las puntuaciones de TRI identificaron bien los ítems de responsabilidad (R2 = 0,57) y predijeron sus cargas factoriales (R2 = 0,45). Además, mostraron validez incremental, explicando entre 11% y 17% más de varianza que los índices tradicionales. Conclusiones: La TRI en las evaluaciones de los EM mejora la alineación de ítems y predice mejor los pesos factoriales, mejorando validez del contenido de los instrumentos.(AU)

Analysis of the characteristics of the smash in padel: validation of the OASP instrument / Análisis de las características del remate en pádel: validación del instrumento OASP

The purpose of this study was to design and validate an observation instrument for the analysis of the performance parameters related to the smash in padel. Eleven experts, who had to meet four of the five inclusion criteria, participated in the process. Aiken's V coefficient and confidence intervals were used to calculate content validity and Cronbach's α coefficient to analyze reliability. The adequacy and writing of the eighteen items initially designed were evaluated. Four variables were eliminated due to obtaining values ​​<.87 in Aiken's V coefficient for adequacy. The rest of the variables were modified in their wording, according to the qualitative evaluations of the experts, or were considered correct. The reliability of the instrument was acceptable, (α=.82). The OASP instrument is very new, as it is of interest for analyzing the use and effectiveness of the padel smash. (AU)

El propósito de este estudio fue diseñar y validar un instrumento de observación para el análisis de las características del remate relacionadas con el rendimiento en pádel. En el proceso participaron once expertos, los cuales debían cumplir cuatro de los cinco criterios de inclusión. El coeficiente V de Aikene intervalos de confianza se utilizaron para calcular la validez de contenido y el coeficiente 𝛼de Cronbach para analizar la fiabilidad. Se evaluó la adecuación y redacción de los dieciocho ítems diseñados inicialmente. Se eliminaron cuatro variables por obtener valores <.87 en el coeficiente V de Aikenen la adecuación. El resto de las variables fueron modificadas en su redacción, según las valoraciones cualitativas de los expertos, o se consideraron correctas. La fiabilidad del instrumento fue aceptable, (𝛼=.82). El instrumento OASP es muy novedoso, pues resulta de interés para analizar el uso y la eficacia del remate en pádel. (AU)

Development and validation of a low-cost laparoscopic simulation box.

INTRODUCTION: The acquisition of laparoscopic technique skills in an operating room is conditioned by the expertise of the tutor and the number of training interventions by the trainee. For students and surgeons to use a laparoscopic simulator to train their skills, it must be validated beforehand. METHODS: A laparoscopic simulator box was designed, along with 6 interchangeable training games. The simulator was validated by a group of 19 experts, physicians with an experience from at least 100 laparoscopic surgeries, and 20 students of 4th to 6th grades of medical school (non-experts). To evaluate its construct validity, time-to-completion and the number of successfully completed games were assessed. We used 11 and 9-item questionnaires to gather information on content and face validity respectively. In both questionnaires, answers were collected through Likert-type scales, scored from 1 to 5. RESULTS: The group of experts required less time and successfully completed more games than the group of non-experts (p < 0.01). The group of non-experts gave a score ≥ 4 points on each of the questions regarding the content validity of the tool, however, the experts rated with a significant lower mean score the need for the simulator to learn the surgical technique (3.68 points; p < 0.01). Regarding the face validity, all items were graded with a score ≥ 4 points except for the question relating to the spatial realism (3.82 points). CONCLUSION: The laparoscopy simulation box and the games were valid means for training surgeons and medical students to develop the skills required for the laparoscopic technique.

Development and validation of a low-cost laparoscopic simulation box / Desarrollo y validación de un simulador laparoscópico de bajo coste

Introduction: The acquisition of laparoscopic technique skills in an operating room is conditioned by the expertise of the tutor and the number of training interventions by the trainee. For students and surgeons to use a laparoscopic simulator to train their skills, it must be validated beforehand. Methods: A laparoscopic simulator box was designed, along with 6 interchangeable training games. The simulator was validated by a group of 19 experts, physicians with an experience from at least 100 laparoscopic surgeries, and 20 students of 4th to 6th grades of medical school (non-experts). To evaluate its construct validity, time-to-completion and the number of successfully completed games were assessed. We used 11 and 9-item questionnaires to gather information on content and face validity respectively. In both questionnaires, answers were collected through Likert-type scales, scored from 1 to 5. Results: The group of experts required less time and successfully completed more games than the group of non-experts (p < 0.01). The group of non-experts gave a score ≥ 4 points on each of the questions regarding the content validity of the tool, however, the experts rated with a significant lower mean score the need for the simulator to learn the surgical technique (3.68 points; p < 0.01). Regarding the face validity, all items were graded with a score ≥ 4 points except for the question relating to the spatial realism (3.82 points). Conclusion: The laparoscopy simulation box and the games were valid means for training surgeons and medical students to develop the skills required for the laparoscopic technique. (AU)

Introducción: La adquisición de las habilidades propias de la técnica laparoscópica en quirófano está condicionada por la experiencia del tutor y el número de intervenciones que realiza el aprendiz. Para que los estudiantes y cirujanos en formación utilicen un simulador laparoscópico para entrenar sus habilidades es importante que este esté previamente validado. Métodos: Se diseñó una caja de simulación laparoscópica, junto con 6 juegos de entrenamiento intercambiables. El simulador fue validado por un grupo de 19 expertos, médicos con experiencia de al menos 100 cirugías laparoscópicas y 20 estudiantes de 4º a 6º del Grado en Medicina (no expertos). Para evaluar su validez de constructo, se evaluó el tiempo hasta la finalización y el número de juegos completados con éxito. Se utilizaron cuestionarios de 11 y 9 ítems para recopilar información sobre la validez de contenido y la validez aparente, respectivamente. En ambos cuestionarios, las respuestas se recogieron con escalas tipo Likert de 1 a 5. Resultados: El grupo de expertos necesitó menos tiempo y completó con éxito más juegos que el grupo de no expertos (p < 0.01). El grupo de no expertos puntuó con ≥ 4 puntos cada una de las preguntas relativas a la validez del contenido, sin embargo, el grupo de experto dio una puntuación significativamente menor la necesidad del simulador para aprender la técnica laparoscópica (3,68 puntos; p < 0,01). En cuanto a la validez aparente, todos los ítems fueron calificados con una puntuación ≥ 4 puntos excepto el relativo al realismo espacial (3,82 puntos). Conclusión: La caja de simulación de laparoscopia y los juegos que desarrollamos son válidos para que cirujanos y estudiantes de medicina desarrollen las habilidades necesarias para la cirugía laparoscópica. (AU)

Adaptação e validade de conteúdo da prova de consciência fonológica para Moçambique / Adaptation and content validity of the phonological awareness test for Mozambique / Adaptación y validez de contenido de la prueba de conciencia fonológica para Mozambique

Phonological awareness is a very important skill for performance in reading, writing and mathematics, suggesting that it is monitored and evaluated preferably during preschool as a form of early intervention to prevent learning disabilities after formal education. However, for its assessment it is necessary to have qualified instruments and in Mozambique there is none that assesses this skill. Therefore, this study aimed to culturally adapt the Phonological Awareness Test by Oral production to the Mozambican context and was carried out in two phases: semantic equivalence and content validation. The Content Validity Index was 0.96, although it is considered excellent, further studies need to be carried out to verify other parameters of validity, reliability and standardization. It is expected that the instrument contributes to evaluation and that above all, the skill is part of the activities of stimulation and intervention in preschoolers.

A consciência fonológica é uma habilidade muito importante para o desempenho em leitura, escrita e matemática, sugerindo-se que seja monitorada e avaliada preferencialmente durante a pré-escola como forma de intervenção precoce para prevenção de dificuldades de aprendizagem após o ensino formal. Contudo, para sua avaliação é necessário ter instrumentos qualificados e em Moçambique não existe nenhum que avalia esta habilidade. Portanto, este estudo teve objetivo de realizar adaptação cultural da Prova de Consciência Fonológica por produção Oral para o contexto moçambicano e foi realizado em duas fases: equivalência semântica e validação de conteúdo. O Índice de Validade de Conteúdo foi de 0,96, embora seja considerado ótimo, estudos posteriores precisam ser realizados para verificar outros parâmetros de validade, fidedignidade e normatização. Espera-se que o instrumento contribua para avaliação e que acima de tudo a habilidade faça parte das atividades de estimulação e intervenção em pré-escolares.

La conciencia fonológica es una habilidad muy importante para el desempeño en lectura, escritura y matemáticas, lo que sugiere que se monitorea y evalúa preferiblemente durante el preescolar como una forma de intervención temprana para prevenir dificultades de aprendizaje después de la educación formal. Sin embargo, para su evaluación es necesario contar con instrumentos calificados y en Mozambique no hay ninguno que evalúe esta habilidad. Por lo tanto, este estudio tuvo como objetivo adaptar culturalmente el Test de Conciencia Fonológica por Producción Oral al contexto de Mozambique y se llevó a cabo en dos fases: equivalencia semántica y validación de contenido. El Índice de Validez de Contenido fue de 0.96, aunque se considera excelente, es necesario realizar más estudios para verificar otros parámetros de validez, confiabilidad y estandarización. Se espera que el instrumento contribuya a la evaluación y que sobre todo, la habilidad sea parte de las actividades de estimulación e intervención en preescolares.

Development and validation of a low-cost laparoscopic simulation box.

INTRODUCTION: The acquisition of laparoscopic technique skills in an operating room is conditioned by the expertise of the tutor and the number of training interventions by the trainee. For students and surgeons to use a laparoscopic simulator to train their skills, it must be validated beforehand. METHODS: A laparoscopic simulator box was designed, along with 6 interchangeable training games. The simulator was validated by a group of 19 experts, physicians with an experience from at least 100 laparoscopic surgeries, and 20 students of 4th to 6th grades of medical school (non-experts). To evaluate its construct validity, time-to-completion and the number of successfully completed games were assessed. We used 11 and 9-item questionnaires to gather information on content and face validity respectively. In both questionnaires, answers were collected through Likert-type scales, scored from 1 to 5. RESULTS: The group of experts required less time and successfully completed more games than the group of non-experts (p < 0.01). The group of non-experts gave a score ≥4 points on each of the questions regarding the content validity of the tool, however, the experts rated with a significant lower mean score the need for the simulator to learn the surgical technique (3.68 points; p < 0.01). Regarding the face validity, all items were graded with a score ≥4 points except for the question relating to the spatial realism (3.82 points). CONCLUSION: The laparoscopy simulation box and the games were valid means for training surgeons and medical students to develop the skills required for the laparoscopic technique.

Escala de crenças sobre o uso de questionários em pesquisas científicas: evidências psicométricas preliminares / Escala de creencias sobre el uso de cuestionarios en la investigación científica: evidencias psicométricas preliminares / A Scale of Beliefs on the Use of Questionnaires in Scientific Research: Preliminary Psychometric Evidence

Resumo Objetivou-se construir a Escala de crenças sobre o uso de questionários em pesquisas científicas (ECQP), a partir de evidências de validade de conteúdo e da verificação de seus indicadores iniciais de validade fatorial e consistência interna para o contexto brasileiro. Foram realizados dois estudos. No estudo 1, elaborou-se os itens da ECQP e verificou-se a validade de seu conteúdo. Contou-se com a participação de quatro juízes especialistas em psicologia social e psicometria, os quais avaliaram o conjunto de itens como adequado ao construto e semanticamente claro para o público-alvo. No estudo 2, por sua vez, buscou-se conhecer a estrutura fatorial da ECQP. Participaram, então, 307 estudantes (M = 25,1 anos), os quais responderam à ECQP e a perguntas demográficas. Os resultados indicaram que a ECQP apresenta índices satisfatórios de validade fatorial e consistência interna. Portanto, confia-se que seja um instrumento promissor, podendo ser utilizada em futuros estudos no Brasil.

Resumen El propósito de este trabajo fue construir la Escala de creencias sobre el uso de cuestionarios en la investigación científica (ECQP, en portugués), desde evidencias de validez de contenido y la verificación de sus indicadores iniciales de validez factorial y consistencia interna para el contexto brasileño. Se realizaron dos estudios. En el estudio primero, se elaboraron los ítems del ECQP y se verificó su validez de contenido. Cuatro jueces expertos en psicología social y psicometría evaluaron el conjunto de ítems como adecuados al constructo y semánticamente claros para el público objetivo. En el segundo estudio, por su parte, se buscó conocer la estructura factorial del ECQP. Así, participaron 307 estudiantes (M = 25,1 años), que respondieron el ECQP y a preguntas demográficas. Los resultados indicaron que el ECQP presenta índices satisfactorios de validez factorial y consistencia interna. Por lo tanto, se confía en que sea un instrumento prometedor y que pueda utilizarse en futuros estudios en Brasil.

Abstract The purpose of this work was to create the Scale of Beliefs on the Use of Questionnaires in Scientific Research by gathering evidence of content validity and verifying its initial indicators of factorial validity and internal consistency for the Brazilian context. Two studies were carried out. In the first study, the items of the questionnaire were elaborated and the validity of their content was verified. Four judges specialized in Social Psychology and Psychometrics evaluated the set of items as appropriate to the construct and semantically clear to the target audience. In the second study, we sought to determine the factorial structure of the questionnaire. Thus, 307 students (M = 25.1 years) participated and answered the questionnaire and demographic questions. The results indicated that the questionnaire has satisfactory indexes of factorial validity and internal consistency. Therefore, it is believed to be a promising instrument and can be used in future studies in Brazil.

Rating mean of expert judges and asymmetric confidence intervals in content validity: An SPSS syntax

La estimación de la validez de contenido, obtenida mediante el análisis racional de jueces expertos, habitualmente se hace con coeficientes que estandarizan entre 0.0 y 1.0 el juicio de los jueces. Sin embargo, esta estimación también puede expresarse en la métrica de las respuestas de los jueces, en la forma de la media de respuesta, y con intervalos de confianza asimétricos alrededor de esta media. El objetivo del presente manuscrito es implementar un procedimiento para estas estimaciones (media de respuesta e intervalos de confianza asimétricos) en un programa escrito en sintaxis SPSS. Se explica la racionalidad del procedimiento, y se desarrolla un ejemplo aplicado del cálculo. El programa es de distribución libre, solicitándolo a los autores.(AU)

The estimation of content validity, obtained by rational analysis of expert judges, is usually done with coefficients that standardize between 0.0 and 1.0 the judges' judgment. However, this estimate can also be ex-pressed in the metric of the judges' responses, in the form of the response mean, and with asymmetric confidence intervals around this mean. The aim of the present manuscript is to implement a procedure for these esti-mates (response mean and asymmetric confidence intervals) in a program written in SPSS syntax. The rationale of the procedure is explained, and an applied example of the calculation is developed. The program is freely dis-tributed upon request to the authors.

Content Validity through Expert Judgment for the Depression Clinical Evaluation Test / Validez de contenido mediante juicio de expertos para el Test de Evaluación Clínica de la Depresión

AbstractBackground/Objective: The evaluation of depression requires valid and reliable measuring instruments, which collect a wide spectrum of symptoms that this disorder displays, in order to carry out an accurate and differential diagnosis. The objective of this work is the construction of the Depression Clinical Evaluation Test (DCET), where affective, somatic, cognitive, behavioral and interpersonal symptoms are considered and also analyze its content validity through an expert judgment. Method: Based on different diagnostic and manual classifications, a specification table for a depression test was established. In its evaluation, 16 experts in psychological evaluation, psychometry and/or psychopathology participated. A total of 300 items were created. The experts had to assess the items according to the criteria of Content, Relevance, Clarity, Comprehension, Sensitivity and Offensiveness. In addition, 50 adults, evaluated the compression of the items. Results: The degree of understanding for all the items was high and the expert judgment favoured the suppression of 104 items, thus obtaining a shorter measuring instrument with a total of 196 items for ease of application. Conclusions: The content validity of the test is adequate and fits the agreed definition of depression.

Antecedentes La evaluación de la depresión requiere de instrumentos de medida válidos, fiables y que recojan el amplio espectro de síntomas que este trastorno conlleva, para poder llevar a cabo un diagnóstico certero y diferencial. El objetivo de este trabajo es la construcción del Test de Evaluación Clínica de la Depresión (TECD), que contempla síntomas afectivos, somáticos, cognitivos, conductuales e interpersonales, y analizar su validez de contenido a través de un juicio de expertos. Método A partir de diferentes clasificaciones diagnósticas y manuales se estableció la tabla de especificación del test para este cuestionario de depresión. En la evaluación de este participaron 16 expertos en Evaluación Psicológica, Psicometría y/o Psicopatología. Se crearon 300 ítems en total, que los expertos tuvieron que valorar atendiendo a los criterios de Contenido, Relevancia, Claridad, Comprensión, Sensitividad y Ofensividad. Además, 50 adultos, valoraron la compresión de los items. Resultados El grado de comprensión de todos los ítems fue elevado y el juicio de expertos supuso la supresión de 104 ítems, obteniendo así un instrumento de medida más breve, con 196 ítems en total, lo que facilitará su aplicación. Conclusiones La validez de contenido del test es adecuada y se adapta a la definición de depresión establecida.

As propriedades psicométricas em instrumentos que tratam sobre o "torcedor e o time de futebol do coração": uma revisão sistemática / Psychometric properties in instruments addressing the "supporter and the beloved football team": a systematic review / Las propiedades psicométricas en instrumentos que versan sobre el "hincha y su equipo de fútbol": una revisión sistemática

Este estudo objetiva identificar e analisar as propriedades psicométricas mais utilizadas em artigos, inseridos nas bases de dados Scopus e Web of Science (WOS) entre os anos de 2016 e 2021, que validaram instrumentos sobre a relação torcedor-time de futebol. Optou-se pelo desenho de pesquisas do tipo Revisão Sistemática, complementado pelo uso do software Bliblioshiny for Bibliometrix. Foram coletados 18 artigos e constatou-se que a validade de conteúdo e a confiabilidade por meio do teste de Alfa de Cronbach foram as propriedades mais utilizadas. A primeira tratou da construção de cada elemento do instrumento e a segunda foi um dos principais parâmetros utilizados na avaliação da confiabilidade de instrumentos do tipo questionário.

This study aims to identify and analyze the most used psychometric properties in articles that validated instruments regarding the supporter/football team relationship found in the Scopus and Web of Science data bases between 2016-2021. To achieve this aim, the research was developed as a Systematic Review complemented by using the Bliblioshiny for Bibliometrix software. Eighteen articles were collected, and our results showed that content validity and the Cronbach's alpha test of reliability were the most used properties. While the former addressed the construction of each element of the instrument, the second was one of the main parameters used to evaluate the reliability of instruments such as questionnaires.

El estudio objetivo identificar y analisar las propiedades psicométricas más utilizadas en los artículos que validaron instrumentos sobre la relación hincha-equipo de fútbol, que se encuentran en las bases de datos Scopus y Web of Science entre los años del 2016-2021. Se optó por el diseño de investigaciones del tipo Repaso Sistemático, complementado por el uso del software Bliblioshiny for Bibliometrix. Han sido recoletados 18 artículos y se constató que la validad de contenido y la confiabilidad por medio del teste de Alfa de Cronbach, han sido las propiedades más utilizadas. La primeira trató de la construcción de cada elemento del instrumento y la segunda fue uno de los principales parámetros utilizados en la evaluación de la confiabilidad de instrumentos del tipo cuestionario.

As propriedades psicométricas em instru-mentos que tratam sobre o "torcedor e o time de futebol do coração": uma revisão sistemática / Psychometric properties in instruments addressing the "supporter and the beloved football team": a systematic review / Las propiedades psicométricas en instrumentos que versan sobre el "hincha y su equipo de fútbol": una revisión sistemática

Este estudo objetiva identificar e analisar as proprieda-des psicométricas mais utilizadas em artigos, inseridos nas bases de dados Scopus e Web of Science (WOS) entre os anos de 2016 e 2021, que validaram instrumentos sobre a relação torcedor-time de futebol. Optou-se pelo desenho de pesquisas do tipo Revisão Sistemática, complementado pelo uso do software Bliblioshiny for Bibliometrix. Foram coletados 18 artigos e constatou-se que a validade de conteúdo e a confiabilidade por meio do teste de Alfa de Cronbach foram as propriedades mais utilizadas. A primeira tratou da construção de cada elemento do instrumento e a segunda foi um dos principais parâmetros utilizados na avaliação da confiabilidade de instrumentos do tipo questionário (AU).

This study aims to identify and analyze the most used psychometric properties in articles that validated instruments regarding the supporter/football team relationship found in the Scopus and Web of Science data bases between 2016-2021. To achieve this aim, the research was developed as a Systematic Review complemented by using the Bliblioshiny for Bibliometrix software. Eighteen articles were collected, and our results showed that content validity and the Cronbach's alpha test of reliability were the most used properties. While the former addressed the construction of each element of the instrument, the second was one of the main parameters used to evaluate the reliability of instruments such as questionnaires (AU).

El estudio objetivo identificar y analisar las propiedades psicométricas más utilizadas en los artículos que validaron instrumentos sobre la relación hincha-equipo de fútbol, que se encuentran en las bases de datos Scopus y Web of Science entre los años del 2016-2021. Se optó por el diseño de investigaciones del tipo Repaso Sistemático, complementado por el uso del software Bliblioshiny for Bibliometrix. Han sido recoletados 18 artículos y se constató que la validad de contenido y la confiabilidad por medio del teste de Alfa de Cronbach, han sido las propiedades más utilizadas. La primeira trató de la construcción de cada elemento del instrumento y la segunda fue uno de los principales parámetros utilizados en la evaluación de la confiabilidad de instrumentos del tipo cuestionario (AU).

Validación de contenido de la versión en castellano del instrumento Long-term Quality of Life Instrument para mujeres supervivientes de cáncer de mama de larga duración / Content validation of the spanish version of the Long-term Quality of Life Instrument for long-term female breast cancer survivors

Fundamentos: La calidad de vida de mujeres afectadas de cáncer de mama diagnosticadas hace 5 o másaños ha sido relativamente poco explorada en España, no existen instrumentos para su medida validados. El objetivo del estudio fue traducir al castellano, adaptar culturalmente y examinar la validez de contenido del cuestionario Long-Term Quality of Life Instrument (LTQL Métodos: La traducción inicial fue realizada por dos traductores con castellano como lengua materna que tradujeron independientemente el cuestionario (versiones T1 y T2). Se realizó un análisis de los resultados y se elaboró una única versión preliminar en castellano (T-1-2). La retrotraducción se realizó por dos traductores con inglés como lengua materna que tradujeron independientemente la versión conjunta (T-1-2) al idioma original (RT1 y RT2) para identificar inconsistencias. Finalmente, se obtuvo una versión final del cuestionario. Para la validación de contenido se constituyó un comité de expertas (siete mujeres afectadas de cáncer de mama) que valoró el grado de claridad, precisión, comprensión y relevancia de cada uno de los ítems del cuestionario traducido al castellano y se calculó el índice de validez de contenido (CVI) del cuestionario según Lawshe y Tristán. Resultados: Se tradujo el cuestionario LTQL al castellano con una baja discrepancia entre los traductores. Se obtuvo un CVI adecuado mayor de 0,58 en claridad (0,95), precisión (0,93), comprensión (0,91) y relevancia (0,72). Conclusiones: El LTQL en un cuestionario de utilidad en el campo de la salud para la evaluación de la calidad de vida de mujeres supervivientes de cáncer de mama de larga duración.(AU)

Background: The quality of life of women affected by breast cancer diagnosed 5 or more years ago has been relatively unexplored in Spain; there are no instruments for its measurement validated. The objective of the study is to translate into Spanish, culturally adapt and examine the content validity of the Spanish version of the LongTerm Quality of Life Instrument (LTQL). Methods: The initial translation was performed by two translators with Spanish as their mother tongue carried out the translation of the questionnaire, obtaining two initial versions in Spanish (T1 and T2). An analysis of the results and elaboration of a single preliminary version in Spanish (T-1-2) were performed. The retro-translation wasperformed by two translators with English as their mother tongue not familiar with the original version translated the joint version (T-1-2) back into the original language (RT1and RT2) to identify inconsistencies. Finally, a final version of the questionnaire was obtained. For content validation a committee of experts (seven women affected by breast cancer) assessed the degree of clarity, accuracy and understanding of each of the items in the questionnaire translated into Spanish, and calculated the content validity index (CVI) of the questionnaire according to Lawshe and Tristán.Results: The LTQL questionnaire was translated into Spanish with a low discrepancy between translators. An adequate CVI higher than 0.58 was obtained in clarity (0.95), precision (0.93), comprehension (0.91) and relevance (0.72). Conclusions: The LTQL is a useful questionnaire in the health field for the assessment of quality of life of women survivors of long-term breast cancer.(AU)

Validez de contenido de la escala de percepción de la calidad de atención en consulta externa, primer nivel de atención del sistema público, municipios de La Paz y El Alto, enfoque intercultural / Content validity of the perception scale of the quality of outpatient care, first level of care of the public system, municipalities of La Paz and El Alto, intercultural approach

OBJETIVO Determinar la validez de contenido para determinar los elementos que constituyen la escala de percepción de la calidad de atención en consulta externa en el primer nivel de atención del sistema público. MATERIAL Y METODO Se trata de un estudio de tipo cuantitativo, diseño de validación de instrumento documental, realizado durante septiembre y noviembre de la gestión 2022, en 2 municipio el Alto y La Paz, la validez de contenido contó con la participación de 4 expertos, y la prueba piloto con una muestra de 42 participantes. Para el juicio de expertos se utilizó el Coeficiente de validez de contenido de Hernández Nieto. En la prueba piloto se estimó el porcentaje de no respuesta, abandono y tiempo de llenado. Se realizó todos los procedimientos estadísticos con ayuda del programa SPSSv26. RESULTADOS La validez de contenido por juicio de expertos obtuvo un puntaje adecuado con validez y concordancia buenas (0,81), con adecuada coherencia, claridad, escala y relevancia. Como resultado de la prueba piloto la tasa de no respuesta fue de 4,7%. La tasa de no respuesta y la tasa de abandono por ítem fueron de 0. El promedio que tardaron los encuestados en completar el instrumento fue de 9,6 min. La fiabilidad del instrumento por dimensión fue aceptable y bueno (>0,6) para 3 de las 5 de las dimensiones teóricas. Mediante el análisis factorial exploratorio se evidenció la unidimensionalidad del constructo, con un total de 17 ítems en su estructura. CONCLUSION El instrumento tiene validez de contenido adecuado con una fiabilidad preliminar aceptable

OBJECTIVE To determine the content validity to determine the items that make up the scale of perception of the quality of outpatient care at the first level of care in the public system. MATERIAL AND METHOD This is a quantitative study, a documentary instrument validation design, carried out during September and November 2022, in 2 municipalities, El Alto and La Paz cities. The content validity was assessed with the participation of 4 experts, and the pilot test was carried out with a sample of 42 participants. For the expert judgment, the content validity coefficient of Hernández Nieto was used. The pilot test estimated the percentage of non-response, abandonment and completion time. All statistical procedures were performed with the help of the SPSSv26 program. RESULTS The content validity by expert judgment obtained an adequate score with good validity and concordance (0.81), with adequate coherence, clarity, scale and relevance. As a result of the pilot test, the non-response rate was 4.7%. The nonresponse rate and dropout rate per item were 0. The average time taken by respondents to complete the instrument was 9.6 min. The reliability of the instrument per dimension was acceptable and good (>0.6) for 3 of the 5 theoretical dimensions. The exploratory factor analysis showed the unidimensionality of the construct, with a total of 17 items in its structure. CONCLUSIONS The instrument has adequate content validity with acceptable preliminary reliability.

Abriendo la caja de Pandora: ¿qué contienen los instrumentos que miden el ambiente de aprendizaje en medicina? / Opening Pandoras Box: What is the Content of the Instruments Measuring the Learning Environment in Medicine?

RESUMEN Introducción/objetivo: La medición del ambiente de aprendizaje en medicina es fundamental para evaluar la calidad de la educación médica. Existen múltiples instrumentos diseñados para este propósito, pero su contenido, fundamento teórico y utilidad práctica son variables. El objetivo de este estudio es sintetizar la validez de contenido y alcance de estos instrumentos. Métodos: Se realizó una revisión sistemática de la literatura de estudios originales en idioma inglés y español publicados desde 1990 hasta 2018 en las bases de datos de Pubmed, ERIC, British Nursing Index, Google Scholar, Science Direct, Cochrane, CINALH y Latindex, que contienen instrumentos para medir el ambiente de aprendizaje en medicina. Se analizaron los dominios, fundamentos teóricos y métodos para determinar la validez de contenido. Resultados: Se incluyeron treinta y ocho estudios que evaluaron doce instrumentos (uno disponible en español). Dos instrumentos identificados fueron específicos para el ambiente quirúrgico y uno para el comunitario. Únicamente tres instrumentos estuvieron respaldados por una teoría educativa. Los dominios más frecuentemente evaluados fueron la atmosfera del aprendizaje, la percepción social y percepción académica. La validez de contenido se estableció principalmente mediante un panel de expertos o método Delphi en el 83,3 % de los instrumentos. Conclusiones: Existen diversos instrumentos para evaluar un constructo complejo como el ambiente de aprendizaje en medicina. En general, estos instrumentos cuentan con validez de contenido respaldada por múltiples fuentes y metodologías, y pueden ser utilizados por los educadores médicos para evaluar de forma integral el ambiente de aprendizaje.

ABSTRACT Introduction/aim: The measurement of the learning environment in medicine is fundamental to assess the quality of medical education. Multiple instruments are available for this purpose, but their content, theoretical foundations and practical implications variate. Our aim is to synthesize the content validity and scope of these instruments. Methods: We conducted a systematic review of original studies designed to measure the learning environment in medicine, published in English and Spanish languages, from 1990 to 2018. We search for studies in Pubmed, ERIC, British Nursing Index, Google Scholar, Science Direct, Cochrane, CINALH and Latindex. We analyzed the main domains, theoretical foundations and methods to determine the content validity of each instrument. Results: Thirty-eight studies evaluating twelve instruments (one available in Spanish) were included. Two instruments were specific for the surgical environment and one for the community. Only three instruments were supported by an educational theory. The domains most frequently evaluated were the atmosphere, social perception and academic perception of learning. The content validity was established through expert panels or Delphi method in 83,3 % of the instruments. Conclusions: There are several instruments to evaluate a complex construct such as the learning environment in medicine. In general, these instruments have content validity supported by multiple sources and methodologies and they can be used by medical educators to assess the learning environment comprehensively.

Content Validity of an Index to Explore the Opinion of Undergraduate Students on Participation as Study Subjects in Research

ABSTRACT: The participation of undergraduate students as study subjects (SS) in research is considered a fundamental research activity of the educational experience provided by a university. Educators should promote learning by the scientific method through these activities under ethical standards for research with human beings. We designed a multidimensional questionnaire in English and Spanish to determine the perception of the educational benefits to, interest of and influence on university students with respect to participation as SS in research, and determine the content validity based on the judgement of experts. The items were designed based on previous theories and measurement scales, and on the opinion of experts. The Student Perceptions of the Educational Value of Research Participation Scale and the Coercion Assessment Scale were included in the new Participation of University Students as Study Subjects Index (USTUDI). The validity of the content was determined based on the judgement of experts who evaluated each item for relevance. The new instrument showed excellent content validity and is a multidimensional, single-application instrument designed to measure three psychological attributes of the participation of university students as SS in research, making it an instrument of high educational value. However, the results must be interpreted with caution, as tests need to be carried out to evaluate other psychometric characteristics.

RESUMEN: La participación de estudiantes de pregrado como sujetos de estudio (SE) en una investigación se considera una actividad de investigación fundamental de la experiencia educativa proporcionada por una universidad. Los educadores que a su vez son investigadores deben promover el aprendizaje por el método científico a través de estas actividades bajo normas éticas de investigación con seres humanos. Diseñamos un cuestionario multidimensional en inglés y español para determinar la percepción de los beneficios educativos, el interés y la influencia en los estudiantes universitarios con respecto a la participación como SE en investigación y determinamos su validez de contenido a partir del juicio de expertos. Los ítems se diseñaron en base a teorías y escalas de medición previas junto a la opinión de expertos. Las escalas de medición The Student Perceptions of the Educational Value of Research Participation Scale y the Coercion Assessment Scale se incluyeron en el nuevo Índice de Participación de los Estudiantes Universitarios como Sujetos de Estudio (IPEUSE). La validez de contenido se determinó a partir del juicio de expertos que evaluaron la pertinencia de cada ítem. El nuevo instrumento mostró una excelente validez de contenido y es un instrumento multidimensional de aplicación única diseñado para medir tres atributos psicológicos de la participación de los estudiantes universitarios como SE en la investigación, lo que lo convierte en un instrumento de alto valor educativo. Sin embargo, los resultados deben interpretarse con cautela, ya que es necesario realizar pruebas para evaluar otras características psicométricas.

Traducción y análisis de validez de contenido del instrumento Opening Minds Scale for Healthcare Practitioners (OMS-HC) para la evaluación del estigma hacia la enfermedad mental en profesionales de la salud en Chile / Translation and content analysis of the Opening Minds Scale for Healthcare Practitioners (OMS-HC) for the assessment of stigma towards mental illness in health care professionals in Chile

INTRODUCCIÓN: Las personas con enfermedades mentales con frecuencia experimentan estigma por parte de profesionales de la salud, por lo que es necesario disponer de instrumentos para evaluar el estigma e implementar acciones para reducirlo. Este manuscrito describe el proceso de traducción y validación de contenido en Chile del instrumento Opening Minds Scale for Healthcare Practitioners (OMS-HC), para la evaluación del estigma en profesionales de la salud hacia personas con enfermedad mental desarrollado originalmente en Canadá. MÉTODO: Se realizó la traducción y análisis de validación de contenido, incluyendo etapas de traducción inglés-castellano y traducción inversa por traductora profesional, triangulación, y finalmente consulta a expertos para evaluación de validez de contenido según Índice de Validez de Contenido (IVC) con 10 expertos de investigación, academia, y experto por experiencia en salud mental. Se consideró aceptables ítems con IVC entre 0,51-0,99. RESULTADOS: Del total de 20 ítems del cuestionario, dos fueron evaluados con IVC menor al establecido, relacionados con constructos "hope" y "compassion", propios del marco teórico-modelo de Recovery, base del instrumento. Los dos ítems fueron re-evaluados con autores originales para adaptarlos procurando fidelidad al constructo, en un proceso iterativo con expertos. CONCLUSIONES: Se presenta la traducción del instrumento Opening Minds Scale for Healthcare Practitioners (OMS-HC) adaptado al castellano y con análisis de su validación de contenido, consistente de 20 ítems para evaluación del estigma hacia personas con enfermedades mentales en profesionales de la salud, posibilitando nuevos estudios que analicen su validez de criterio, y la exploración de su utilidad a nivel local.

INTRODUCTION: People with mental illnesses frequently experience stigma from health care professionals, which is why it is an urge to count with adequate assessments to evaluate stigma to address it. This manuscript describes the process of language translation and content validation in Chile of the Opening Minds Scale for the assessment of stigma against people with mental illnesses in Healthcare Practitioners (WHO-HC), originally developed in Canada. METHODS: Language translation and content validation analysis were performed, including English-Spanish translation and reverse translation by professional translator, item triangulation by researchers, and content validity analysis of the translated questionnaire by expert evaluation based on the Content Validity Index (CVI), including 10 experts in academia, research, and one expert by experience. Items rated with CVI 0.51-0.99 were considered acceptable. RESULTS: From the total of 20 items of the questionnaire, two were rated with lower CVI than acceptable, specifically related to the constructs "hope" and "compassion", part of the theoretical framework of Recovery in which the questionnaire is based on. The two items were re-evaluated including original authors to adapt them seeking fidelity to the foundational constructs, through an iterative process with experts. CONCLUSIONS: The translation of the Opening Minds Scale for Healthcare Practitioners (WHO-HC) is presented, adapted to Spanish in Chile after content analysis, consisting of 20 items for the evaluation of stigma towards people with mental illness in health professionals, enabling the development of new studies to analyze criterion validity, and the exploration of feasibility and utility at the local level.

Validação de conteúdo do teste de conhecimento tático declarativo para o futsal / Content validation of the declarative tactical knowledge test for futsal / Validez de contenido del test de conocimiento táctico declarativo para el fútbol de salón

RESUMO Objetiva-se demonstrar os indícios de validade de conteúdo de 125 cenas de ataque que foram extraídas de partidas oficiais de futsal masculino para compor o Teste de Conhecimento Tático Declarativo para o futsal (TCTD-FS). Cinco treinadores de futsal com no mínimo 10 anos de experiência avaliaram as cenas no que se refere à qualidade e pertinência, bem como a melhor tomada de decisão e sinais relevantes. Recorreu-se ao Coeficiente de Validade de Conteúdo (CVC), Concordância Entre Observadores (CEO), análise de conteúdo e validade ecológica. Os resultados indicaram 21 cenas com valores médios de CVC > 0,90 e CEO = 1,0. Conclui-se que as cenas selecionadas apresentaram evidências de validade de conteúdo e poderão compor a versão preliminar do TCTD-FS.

ABSTRACT The aim is to demonstrate the evidence of content validation for 125 offensive scenes extracted from official men's futsal matches to compose the declarative tactical knowledge test for futsal (TCTD-FS). Five coaches with at least 10 years of experience evaluated the scenes in terms of quality and relevance, the best tactical decision, and relevant cues. The Content Validity Coefficient (CVC), the agreement between observers (AO), the content analysis, and the ecological validity were used. The results indicated 21 scenes with mean values of CVC > 0.90 and AO = 1.0. It is concluded that the selected scenes present content validity and may compose the preliminary version of the TCTD-FS.

RESUMEN Demostar los indícios de validez de contenido de 125 escenas de ataque extraídas de partidos oficiales de fútbol de salón masculino para hacer parte del test de conocimiento táctico declarativo para el fútbol de salón (TCTD-FS). Cinco entrenadores con al menos 10 años de experiencia evaluaron las escenas en términos de calidad y relevancia, selección de la mejor toma de decisión y pistas relevantes. Se utilizó el coeficiente de validez de contenido (CVC), el acuerdo entre observadores (AEO), el análisis de contenido y la validez ecológica. Los resultados determinaron 21 escenas con valores medios de CVC > 0.90 y AEO = 1.0. Se concluye que las escenas seleccionadas presentan evidencias de validez de contenido y se incluirán en la primera versión del TCTD-FS.

Validez de apariencia y de contenido de la escala de resiliencia SV-RES en cuidadores cubanos / Face and content validity of the SV-RES resilience scale in cuban caregivers

A pesar de los esfuerzos realizados en las últimas décadas por conocer en profundidad la resiliencia, existen problemas metodológicos en su estudio. En este sentido, el presente artículo se propuso determinar la validez de apariencia y la validez de contenido de la Escala de Resiliencia SV-RES en cuidadores cubanos de pacientes con discapacidad motora hospitalizados. Se analizó la validez de apariencia para explorar la aplicabilidad y viabilidad del instrumento a partir de un análisis cualitativo de las respuestas emitidas por 15 sujetos que conformaron el pilotaje. Para la determinación de la validez de contenido se empleó el Índice de Validez de Contenido; en efecto, la muestra estuvo conformada por 11 expertos. En ambos casos la muestra fue no probabilística por conveniencia. Como resultados encontramos que la caracterización sociodemográfica de los cuidadores concordó con lo referido en estudios previos. Al validar la apariencia, las principales dificultades estuvieron vinculadas con la extensión de la escala y la comprensión de determinados ítems. Se mostraron evidencias de validez de contenido al obtener resultados cercanos a la unidad. La resiliencia está siendo una de las variables más estudiadas en la actualidad por las implicaciones que tiene para la salud humana, requiriendo para su evaluación rigor científico.

Despite the efforts in the last decades to know resilience in-depth, there are methodological problems in its study. In this sense, the present article aimed to determine the SV-RES Resilience Scale's face validity and content validity in Cuban caregivers of hospitalized patients with motor disabilities. The face validity was analyzed to explore the applicability and feasibility of the instrument based on a qualitative analysis of the answers given by 15 subjects who made up the pilot test. To determine de content's validity, we used the Content Validity Index; in fact, the sample consisted of 11 experts. In both cases, the sample was non-probabilistic by convenience. As a result, we found that the sociodemographic characterization of the caregivers was in agreement with previous studies. When validating the appearance, the main difficulties were related to the scale's length and the comprehension of certain items. There was evidence of content validity by obtaining results close to unity. Resilience is currently one of the most studied variables due to its implications for human health, requiring scientific rigour in its evaluation.

Adaptación del Inventario de Ansiedad de Beck en población de Buenos Aires / Adaptation of the Beck Anxiety Inventory in population of Buenos Aires / Adaptation of the Beck Anxiety Inventory in population of Buenos Aires

RESUMEN Introducción : En la actualidad los trastornos de ansiedad son los de mayor prevalencia a nivel mundial, llegando a una tasa del 5% en Argentina en el año 2017. En ese sentido, el Inventario de Ansiedad de Beck (BAI) es uno de los instrumentos más utilizados en investigación y clínica en la actualidad. En su construcción uno de los objetivos fue evaluar síntomas de ansiedad que no suelen evidenciarse en trastornos depresivos, motivo por el cual resulta un test relevante para realizar un diagnóstico diferencial. El objetivo de este estudio fue adaptar el BAI a población adulta de Buenos Aires. Método : Se realizó una traducción directa del inventario y luego un juicio de expertos para evaluar la validez de contenido. Se analizó la capacidad de discriminación de los reactivos y se evaluó la validez estructural de los diferentes modelos encontrados en la literatura. A su vez, se analizó la consistencia interna del instrumento. Resultados : La adaptación presenta adecuada validez de contenido y los reactivos han demostrado discriminar de forma adecuada. A su vez, a partir de los análisis factoriales confirmatorios realizados se optó por la solución más parsimoniosa que indica la unidimensionalidad del constructo aportando evidencia de validez de constructo. A su vez, la adaptación presenta una adecuada consistencia interna. Se ofrecen valores normativos tentativos Conclusión : Se han hallado evidencias de validez y confiablidad para la adaptación argentina del BAI. Se lo considera un instrumento de gran utilidad clínica.

ABSTRACT Background : Currently, anxiety disorders are the most prevalent worldwide, reaching a rate of 5% in Argentina in 2017. The Beck Anxiety Inventory (BAI) is one of the instruments most used in research and clinic today. In its construction, one of the objectives was to evaluate anxiety symptoms that are not usually evident in depressive disorders, which is why it is a relevant test to make a differential diagnosis. The objective of this study was to adapt the BAI to the adult population of Buenos Aires. Methods : A direct translation of the inventory and then an expert judgment to assess the content validity were carried out. The discrimination capacity of the items was analyzed and the structural validity of the test was evaluated according to different models found in the literature. Also, the internal consistency of the instru-Publicación editada por el Instituto Peruano de Orientación Psicológica - IPOPSObra bajo licencia de Creative Commons Atribución 4.0 Internacional (CC BY 4.0) 2ment was analyzed. Results : The adaptation presents adequate content validity and the items have been shown to discriminate adequately. As for the confirmatory factor analyzes, the most parsimonious solution, which indicates the one-dimensionality of the construct, was chosen, providing evidence of construct validity. In turn, the adaptation presents adequate internal consistency. Tentative normative values are offered. Conclusion : Evidence of validity and reliability has been found for the Argentine adaptation of the BAI. It is considered an instrument of great clinical utility.

ABSTRACT Background : Currently, anxiety disorders are the most prevalent worldwide, reaching a rate of 5% in Argentina in 2017. The Beck Anxiety Inventory (BAI) is one of the instruments most used in research and clinic today. In its construction, one of the objectives was to evaluate anxiety symptoms that are not usually evident in depressive disorders, which is why it is a relevant test to make a differential diagnosis. The objective of this study was to adapt the BAI to adult population of Buenos Aires. Methods : A direct translation of the inventory and then an expert judgment to assess the content validity were carried out. The discrimination capacity of the items was analyzed, and the structural validity of the test were evaluated according to different models found in the literature. Also, the internal consistency of the instrument was analyzed. Results : The adaptation presents adequate content validity and the items have been shown to discriminate adequately. As for the confirmatory factor analyzes, the most parsimonious solution, which indicates the one-dimensionality of the construct, was chosen, providing evidence of construct validity. The adaptation presents adequate internal consistency. Tentative normative values are offered. Conclusion : Evidence of validity and reliability has been found for the Argentine adaptation of the BAI. It is considered an instrument of great clinical utility.

RESUMEN. Introducción : En la actualidad los trastornos de ansiedad son los de mayor prevalencia a nivel mundial, llegando a una tasa del 5% en Argentina en el año 2017. En ese sentido, el Inventario de Ansiedad de Beck (BAI) es uno de los instrumentos más utilizados en investigación y clínica en la actualidad. En su construcción uno de los objetivos fue evaluar síntomas de ansiedad que no suelen evidenciarse en trastornos depresivos, motivo por el cual resulta un test relevante para realizar un diagnóstico diferencial. El objetivo de este estudio fue adaptar el BAI a población adulta de Buenos Aires. Método : Se realizó una traducción directa del inventario y luego un juicio de expertos para evaluar la validez de contenido. Se analizó la capacidad de discriminación de los reactivos y se evaluó la validez estructural de los diferentes modelos encontrados en la literatura. A su vez, se analizó la consistencia interna del instrumento. Resultados : La adaptación presenta adecuada validez de contenido y los reactivos han demostrado discriminar de forma adecuada. A su vez, a partir de los análisis factoriales confirmatorios realizados se optó por la solución más parsimoniosa que indicala unidimensionalidad del constructo aportando evidencia de validez de constructo. A su vez, la adaptación presenta una adecuada consistencia interna. Se ofrecen valores normativos tentativos. Conclusión : Se han hallado evidencias de validez y confiablidad para la adaptación argentina del BAI. Se lo considera un instrumento de gran utilidad clínica.

Validación de un cuestionario sobre factores de riesgo para defectos congénitos / Validation of a questionnaire about risk factors for congenital defects

Introducción: Los defectos congénitos constituyen la primera causa de muerte infantil en los países desarrollados y la segunda en muchos países en vías de desarrollo. Objetivo: Validar un cuestionario sobre factores de riesgo para defectos congénitos relacionados con la deficiencia de ácido fólico. Métodos: El proceso de validación se basó en un proceso dinámico de retroalimentación y toma de decisiones cambiante, de acuerdo al criterio de expertos, para lo que se utilizó el método Delphi, el cual constó de tres etapas: selección de los expertos, análisis y validación de cada uno de los ítems por parte de los expertos y su posterior reevaluación y, por último, la realización de un estudio piloto. En el proceso de validación del cuestionario se calculó el coeficiente de concordancia de Kendall y Friedman con el objetivo de determinar concordancia o similitudes de las respuestas de los evaluadores respectivamente. Resultados: Se seleccionaron 18 expertos con altos niveles de competencia de acuerdo al cálculo de los coeficientes de conocimiento y argumentación. En la segunda versión del cuestionario existió similitud en las respuestas de los expertos a favor de la categoría superior de muy bien, así como concordancia en el nivel de respuesta de los expertos. Conclusiones: El cuestionario diseñado dispone de niveles óptimos de validez de contenido y factibilidad para identificar los factores de riesgo para defectos congénitos sensibles a la deficiencia de ácido fólico(AU)

Introduction: Congenital defects are the leading cause of child mortality in developed countries and the second in many developing countries. Objective: Validate a questionnaire about risk factors for congenital defects related to folic acid deficiency. Methods: Validation was based on a dynamic process of feedback and changing decision-making geared by expert criteria for which use was made of the Delphi method in three stages: selection of experts, analysis and validation of each item by the experts and further re-evaluation, and conduct of a pilot study. Kendall and Friedman's coefficient of concordance was estimated to determine the agreement or similarities between the answers provided by the evaluators. Results: Eighteen highly-qualified experts were selected based on the knowledge and argumentation coefficients estimated. In the second version of the questionnaire the answers provided by experts coincided in awarding the higher category of 'very good', and there was concordance in the experts' response level. Conclusions: The questionnaire designed is characterized by optimal levels of content validity and feasibility to identify risk factors for congenital defects related to folic acid deficiency(AU)