ABSTRACT
ABSTRACT Introduction: Regression modeling is a statistical method commonly used in health research, especially by observational studies. Objective: The objectives of this paper were to 1) determine the frequency of reporting of regression modeling in original biomedical and public health articles that were published in Biomédica between 2000 and 2017; 2) describe the parameters used in the statistical models, and 3) describe the quality of the information reported by the studies to explain the statistical analyses. Materials and methods: We conducted a critical assessment review of all original articles published in Biomédica between 2000 and 2017 that used regression models for the statistical analysis of the studies main objectives. We generated a 20-item checklist based on four good practice guidelines for the presentation of statistical methods. Results: Most of the studies were observational studies related to public health sciences (65.7%). Less than half (37.2%) of them reported using a combination of conceptual frameworks and statistical criteria for the selection of variables to be included in the regression model. Less than one quarter (22.1%) reported the verification of the assumptions of the model. The most frequently used uncertainty measure was the p-value (73.5%). Conclusion: There are significant limitations in the quality of the reports of statistical regression models, which reviewers and readers need in order to correctly assess and interpret the statistical models. The results, herein, are provided as an invitation to researchers, reviewers, and editors of biomedical journals to develop, promote, and control an appropriate culture for statistical analysis and reporting in Colombia.
RESUMEN Introducción. Los modelos de regresión son métodos estadísticos comúnmente utilizados en la investigación en salud, especialmente en estudios observacionales. Objetivos. Determinar la frecuencia de uso de modelos de regresión en los artículos originales de biomedicina y salud pública publicados en Biomédica entre 2000 y 2017, describir los parámetros utilizados en los modelos estadísticos, así como la calidad de la información reportada por los estudios para explicar el análisis estadístico. Materiales y métodos. Se hizo una revisión y evaluación crítica de todos los artículos originales publicados en la revista Biomédica entre 2000 y 2017 que utilizaron modelos de regresión en el análisis estadístico. Se construyó una lista de verificación de 20 ítems sobre la base de cuatro guías de buenas prácticas para la presentación de los métodos estadísticos. Resultados. La mayoría de los estudios incluidos eran estudios observacionales relacionados con las ciencias de la salud pública (65,7 %). En menos de la mitad (37,2 %) de ellos se informó sobre el uso de una combinación de marco conceptual y criterios estadísticos para la selección de las variables incluidas en el modelo de regresión; en menos de una cuarta parte (22,1 %) se informó de la verificación de los supuestos del modelo, y la medida de incertidumbre reportada con mayor frecuencia fue el valor de p (73,5 %). Conclusión. Hay limitaciones importantes en la calidad de los informes de los modelos de regresión estadísticos necesarios para la correcta evaluación y la interpretación de los modelos estadísticos por parte de los revisores y lectores. Los resultados se ofrecen como una invitación a investigadores, revisores y editores de revistas biomédicas a que promuevan el desarrollo de una cultura adecuada de análisis estadístico y presentación de informes en Colombia.
Subject(s)
Periodicals as Topic , Publishing , Regression Analysis , Biomedical Research , ColombiaABSTRACT
OBJETIVO: apresentar a metodologia utilizada na construção dos pesos de pós-estratificação do Sistema de Vigilância de Fatores de Risco e Proteção para Doenças Crônicas por Inquérito Telefônico (Vigitel) 2012 e comparar a tendência de indicadores estimados pelos métodos por célula e rake. MÉTODOS: neste painel de estudos transversais, foram estimadas as prevalências de fumantes, excesso de peso, consumo de frutas, verduras e legumes no período 2006-2012, pelos métodos por célula e rake. RESULTADOS: não houve diferenças nas tendências temporais dos indicadores estimados por ambos métodos; porém, as prevalências de fumantes estimadas pelo método rake foram inferiores àquelas estimadas pelo método por célula, enquanto as prevalências do consumo de frutas, verduras e legumes foram superiores; para o excesso de peso, não houve diferença entre os métodos. CONCLUSÃO: o método rake formeceu maior precisão das estimativas quando comparado ao método por célula, revelando-se mais vantajoso, embora apresente vício de cobertura de cadastro.
OBJETIVO: presentar la metodología utilizada para la construcción de pesos de post-estratificación del Sistema de Vigilancia de Fatores de Riesgo y Proteción para enfermedades Crónicas por Encuesta Telefónica (Vigitel) 2012 y comparar una tendencia de indicadores estimados por métodos de rake y célula. MÉTODOS: en este panel de estudios transversales, estimamos las prevalencias de fumantes, exceso de peso, consumo de frutas, verduras y legumbres, de 2006 a 2012, por métodos célula y rake. RESULTADOS: no hubo diferencias en las tendencias temporales de los indicadores; sin embargo las prevalencias de fumantes estimadas por el método rake fueron inferiores a las estimadas por célula, mientras que las prevalencias de consumo de frutas y legumbres fueron superiores; para el exceso de peso, no hubo diferencia entre los métodos. CONCLUSIÓN: método rake tuvo mayor precisión en las estimaciones cuando comparado con célula, mostrando más ventajas, aunque presenta vicio de cobertura de registro.
OBJECTIVE: to introduce the methodology used to calculate post-stratification weights of the 2012 Surveillance System for Risk and Protective Factors for Chronic Diseases by Telephone Survey (Vigitel) and to compare the trends of indicators estimated by cell-by-cell weighting and raking methods. METHODS: in this panel of cross-sectional studies, the prevalences of smokers, overweight, and intake of fruits and vegetables from 2006 to 2012 were estimated using the cell-by-cell weighting and raking methods. RESULTS: there were no differences in time trends of the indicators estimated by both methods, but the prevalence of smokers estimated by the raking method was lower than the estimated by cell-by-cell weighting, whilst the prevalence of fruit and vegetable intake was higher; for overweight, there was no difference between the methods. CONCLUSION: raking method presented higher accuracy of the estimates when compared to cell-by-cell weighting method, proving to be most convenient, although it presents register coverage bias.
Subject(s)
Humans , Male , Female , Adolescent , Adult , Middle Aged , Telephone , Bias , Health Surveys , Surveillance in Disasters , Serial Cross-Sectional StudiesABSTRACT
Resumen Introducción: El análisis de las propiedades psicométricas de un instrumento reviste importancia para el control de sesgos en la medición. Objetivo: Comparar la validez de constructo y la consistencia interna de tres estructuras factoriales del cuestionario de salud general de 12 ítems. Materiales y métodos: Se hizo un estudio de validación en una muestra anidada de 483 estudiantes de odontología de Cartagena, Colombia. Además de las preguntas del instrumento, se hicieron otras sobre aspectos personales. Se evaluó la validez de constructo de la estructura unidimensional, de la unidimensional con corrección del sesgo de respuesta, y de la de dos y tres factores y sistemas de puntuación del tipo de la escala de Likert (0-1-2-3) y dicotómico (0-0-1-1). La validez se determinó con un análisis factorial confirmatorio y, la consistencia interna, con el coeficiente alfa de Cronbach para la escala de Likert y la fórmula 20 de Kuder-Richardson para el método dicotómico empleando los programas Stata(tm), versión 13.2 (Stata Corp, USA) y Mplus(tm), versión 7.11 (Muthen andMuthen, USA). Resultados: Los índices de ajuste revelaron que el mejor modelo era el unidimensional con corrección del sesgo de respuesta y puntación dicotómica (grados de libertad=36; ji al cuadrado=52,432; raíz cuadrada del error medio de aproximación=0,03; IC90% 0,008-0,048; índice comparativo de ajuste=0,982; índice de Tucker-Lewis=0,966). La consistencia interna fue de 0,70. Conclusiones: El ajuste del modelo obtenido en este estudio permitió controlar el sesgo de medición y, así, garantizar la validez externade los resultados del cuestionario de salud general de 12 ítems para la evaluación de las condiciones mentales en esta población. Las propiedades psicométricas de las escalas deben evaluarse críticamente antes del análisis de los resultados.
Abstract Introduction: The analysis of the psychometric properties of an instrument is important for the control of measurement bias. Objective: To compare the construct validity and internal consistency of three factorial structures of the General Health Questionnaire-12. Materials and methods: We conducted a validation study in a nested sample of 483 dentistry students from Cartagena, Colombia. The instrument was applied along with questions about personal factors. The construct validity of the following structures was evaluated: one-dimensional, one-dimensional with correction of response bias, and the two and three-factor structure, and these scoring systems: Likert scale (0-1-2-3) and dichotomous (0-0-1-1) scoring method. Validity was determined by confirmatory factorial analysis, and the internal consistency with Cronbach's alpha coefficient for the Likert scale and the Kuder-Richardson Formula 20 for the dichotomous scoring using the Stata(tm), v. 13.2 (Stata Corp, USA) and Mplus(tm), v.7.11 (Muthen and Muthen, USA) software. Results: Adjustment indexes revealed that the best model was the one-dimensional one with correction of response bias based on a dichotomous scoring (degrees of freedom=36; chi square=52.432; root mean square error of approximation=0.03; 90% CI: 0.008-0.048; comparative fit index=0.982; Tucker-Lewis index=0.966). The internal consistency was 0.70. Conclusions: The adjustment of the model in this study allowed for the control of measurement bias and guaranteed external validity of results when using the General Health Questionnaire-12 to evaluate mental conditions in this population. The psychometric properties of the scales should be critically evaluated before results analysis.
Subject(s)
Adult , Female , Humans , Male , Young Adult , Self-Assessment , Surveys and Questionnaires , Psychometrics , Students, Dental/psychology , Bias , Mental Health , Reproducibility of Results , Factor Analysis, Statistical , Colombia , Models, TheoreticalABSTRACT
El incremento continuo de pacientes con perfiles clínicos complejos debidos a enfermedades crónicas ha favorecido el uso cada vez más extendido del término multimorbilidad. Es indispensable disponer de una medición apropiada de esta condición, dado que representa un reto para el manejo clínico de los pacientes, los sistemas de salud y la investigación epidemiológica. En este ensayo se revisan las propuestas conceptuales subyacentes a la medición de la multimorbilidad y se discuten los retos metodológicos involucrados, tomando como referencia las definiciones clásicas de comorbilidad, sus diferencias con el concepto de multimorbilidad y su papel en los estudios epidemiológicos, así como los distintos modelos conceptuales de los que se derivan las definiciones operativas y las estrategias de medición de dicha variable. Se pudo determinar que hay una brecha importante entre el desarrollo del concepto de multimorbilidad y las definiciones operativas, a pesar del significativo avance teórico que ha permitido trascender la concepción clásica de comorbilidad para llegar al concepto actual de multimorbilidad. Sin embargo, las estrategias de medición no se han desarrollado al mismo ritmo del concepto, por lo que se requieren nuevas propuestas metodológicas que permitan obtener información sobre su verdadero impacto en la salud de las personas y sus implicaciones para la salud pública.
The growing number of patients with complex clinical profiles related to chronic diseases has contributed to the increasingly widespread use of the term ´multimorbidity´. A suitable measurement of this condition is essential to epidemiological studies considering that it represents a challenge for the clinical management of patients as well as for health systems and epidemiological investigations. In this context, the present essay reviews the conceptual proposals behind the measurement of multimorbidity including the epidemiological and methodological challenges it involves. We discuss classical definitions of comorbidity, how they differ from the concept of multimorbidity, and their roles in epidemiological studies. The various conceptual models that contribute to the operational definitions and strategies to measure this variable are also presented. The discussion enabled us to identify a significant gap between the modern conceptual development of multimorbidity and the operational definitions. This gap exists despite the theoretical developments that have occurred in the classical concept of comorbidity to arrive to the modern and multidimensional conception of multimorbidty. Measurement strategies, however, have not kept pace with this advance. Therefore, new methodological proposals need to be developed in order to obtain information regarding the actual impact on individuals´ health and its implications for public health.
Subject(s)
Comorbidity , Aging , Bias , Chronic Disease , Epidemiologic Studies , Models, TheoreticalABSTRACT
Resumo: Apesar do crescente reconhecimento de seu potencial, os diagramas causais ainda são pouco utilizados na investigação epidemiológica. Uma das possíveis razões é que muitos programas de investigação envolvem temas sobre o qual há certo grau de incerteza sobre os mecanismos dos processos que geram os dados. Neste trabalho, a relação entre estresse ocupacional e obesidade é utilizada como um exemplo de aplicação de diagramas causais em questões relacionadas ao confundimento. São apresentadas etapas da seleção de variáveis para ajuste estatístico e da derivação das implicações estatísticas de um diagrama causal. A principal vantagem dos diagramas causais é tornar explícitas as hipóteses adjacentes ao modelo considerado, permitindo que suas implicações possam ser analisadas criticamente, facilitando, dessa forma, a identificação de possíveis fontes de viés e incerteza nos resultados de um estudo epidemiológico.
Abstract: Epidemiological research still rarely uses causal diagrams, despite growing recognition of their explanatory potential. One possible reason is that many research programs involve themes in which there is a certain degree of uncertainty as to mechanisms in the processes that generate the data. In this study, the relationship between occupational stress and obesity is used as an example of the application of causal diagrams to questions related to confounding. The article presents the selection stages for variables in statistical adjustment and the derivation of a causal diagram's statistical implications. The main advantage of causal diagrams is that they explicitly reveal the respective model's underlying hypotheses, allowing critical analysis of the implications and thereby facilitating identification of sources of bias and uncertainty in the epidemiological study's results.
Resumen: A pesar del creciente reconocimiento de su potencial, los diagramas causales todavía se utilizan poco en la investigación epidemiológica. Una de las posibles razones es que muchos programas de investigación están involucrados en temas sobre los cuales existe un cierto grado de incertidumbre acerca de los mecanismos de los procesos que generan los datos. En este trabajo, la relación entre estrés ocupacional y obesidad se utiliza como un ejemplo de aplicación de diagramas causales en cuestiones relacionadas con la confusión. Se presentan etapas de la selección de variables para el ajuste estadístico y de la derivación de las implicaciones estadísticas de un diagrama causal. La principal ventaja de los diagramas causales es hacer explícitas las hipótesis adyacentes al modelo considerado, permitiendo que sus implicaciones puedan ser analizadas críticamente, facilitando, de esta forma, la identificación de posibles fuentes de sesgo e incertidumbre en los resultados de un estudio epidemiológico.
Subject(s)
Humans , Causality , Confounding Factors, Epidemiologic , Brazil , Bias , Models, StatisticalABSTRACT
En los artículos anteriores de esta serie se ha proporcionado información sobre la revista científica, el artículo científico original y el artículo científico de revisión. El propósito de esta cuarta entrega de educación continua es brindar los conocimientos básicos necesarios para entender los ensayos clínicos y los ensayos clínicos controlados aleatorios (ECAs). Un ECA es un experimento científico prospectivo que involucra sujetos humanos en los que se inicia un tratamiento o intervención para su evaluación. En el ECA los sujetos son asignados al azar a uno de dos grupos: el grupo experimental y el grupo de comparación o control...
Subject(s)
Humans , Clinical Trials as Topic , Education, Dental, Continuing/standards , Randomized Controlled Trials as Topic , Databases, Bibliographic , Journalism, Dental/standards , PubMed/standards , BiasABSTRACT
O artigo descreve a qualidade metodológica dos estudos publicados sobre prevalência de dor lombar realizados no Brasil. Dezoito estudos foram considerados elegíveis após pesquisas nas seguintes bases de dados: LILACS, PubMed, Embase, CINAHL, SPORTDiscus e SciELO. Alto risco de viés foi encontrado nos critérios de validade externa relacionados com a amostragem, e viés de não-resposta. Considerando os critérios de validade interna, a principal fonte de viés estava relacionada com a falta de uma definição de caso aceitável, bem como a utilização de instrumentos que não apresentavam construto de confiabilidade e a validade provados. Nenhum estudo representativo com valores de prevalência da dor lombar no Brasil foi encontrado. Os trabalhos publicados incluídos nesta revisão apresentaram um alto risco de viés que afetam os dados de prevalência. Futuros estudos com desenho metodológico adequado são necessários, a fim de apresentar o real impacto da dor lombar no Brasil e permitir comparações.
El artículo describe la calidad metodológica de los estudios publicados sobre la prevalencia de dolor lumbar realizados en Brasil. Dieciocho estudios se consideraron elegibles, después de búsquedas en las siguientes bases de datos electrónicas: LILACS, PubMed, Embase, CINAHL, SPORTDiscus y SciELO. Se encontró una alta fuente de sesgo en los criterios de validez externos, relacionados con la toma de muestras, y el sesgo de no respuesta. Teniendo en cuenta los criterios de validez interna, la principal fuente de sesgo se relaciona con la falta de una definición de caso aceptable, y el uso de instrumentos que no tenían la fiabilidad y validez de constructo. No se encontraron estudios representativos que ofrecieran una prevalencia generalizable de dolor lumbar en Brasil. Los estudios publicados, incluidos en esta revisión, tenían un alto riesgo de sesgo que afecta a los datos de prevalencia. Son necesarios futuros estudios con diseño metodológico apropiado, con el fin de presentar el impacto real del dolor lumbar en Brasil para permitir comparaciones.
The article describes the methodological quality of published studies on prevalence of low back pain in Brazil. Eighteen studies were considered eligible after searches in the following electronic databases: LILACS, PubMed, Embase, CINAHL, SPORTDiscus and SciELO. A high source of bias was observed in the criteria for external validity related to sampling, in addition to non-response bias. Considering the criteria for internal validity, the main sources of bias were the lack of an acceptable definition of low back pain and the use of instruments that lacked proven reliability and validity. No representative study was found that provides a generalizable prevalence of low back pain in Brazil. The published studies included in this review showed a high risk of bias that affects the prevalence data. Future studies with appropriate methodological design are necessary to verify the real impact of low back pain in Brazil and allow comparisons.
Subject(s)
Female , Humans , Male , Chronic Pain/epidemiology , Low Back Pain/epidemiology , Bias , Brazil/epidemiology , Prevalence , Risk FactorsABSTRACT
OBJETIVO: Analisar efeitos do uso de pesos de pós-estratificação para corrigir vícios decorrentes da baixa cobertura de domicílios com telefone. MÉTODOS: Comparação dos resultados levantados pelo Inquérito Domiciliar com o Sistema de Vigilância de Fatores de Risco e Proteção para Doenças Crônicas por Inquérito Telefônico (Vigitel), em Rio Branco, AC, 2007, cuja cobertura era de 40% de telefonia fixa. O vício potencial do Vigitel foi expresso pela diferença entre as prevalências do Vigitel e do Inquérito Domiciliar, calculada a raiz quadrática do erro quadrático médio como medida de acurácia da estimativa. RESULTADOS: O procedimento de ponderação do Vigitel corrigiu o vício potencial nas prevalências de consumo de frutas, legumes e verduras, de carnes com gordura visível, o ser fumante, a autoavaliação do estado de saúde ruim e da morbidade referida de colesterol ou triglicéride. O procedimento adotado pelo Vigitel não reduziu o vício nas prevalências da prática de atividade física no tempo livre e de morbidade referida de asma, bronquite asmática, bronquite crônica ou enfisema. CONCLUSÕES: É necessário o uso de métodos alternativos de ponderação e a estratégia de seleção de variáveis externas para construção de pesos de pós-estratificação que minimizem o vício potencial das estimativas das variáveis decorrentes da baixa cobertura de domicílios com telefone fixo. .
OBJETIVO: Analizar efectos del uso de pesos de post-estratificación para corregir vicios consecuentes de la baja cobertura de domicilios con teléfono. MÉTODOS: Comparación de los resultados encontrados en la Encuesta Domiciliar con el Sistema de Vigilancia de Factores de Riesgo y Protección para Enfermedades Crónicas por Pesquisa Telefónica (Vigitel), en Rio Branco, AC, Brasil, 2007, cuya cobertura era de 40% de telefonía fija. El vicio potencial de Vigitel fue expresado por la diferencia entre las prevalencias de Vigitel y de la Encuesta Domiciliar, calculando la raíz cuadrada del error cuadrado promedio como medida de la precisión de la estimación. RESULTADOS: El procedimiento de ponderación de Vigitel corrigió el vicio potencial en las prevalencias de consumo de frutas, legumbres y verduras, de carnes con grasas visibles, el ser fumador, la autoevaluación del estado del mal estado de salud y de la morbilidad referida por el colesterol o triglicéridos. El procedimiento adoptado por Vigitel no redujo el vicio en las prevalencias de la práctica de actividad física en el tiempo libre y de morbilidad referida por el asma, bronquitis asmática, bronquitis crónica o enfisema. CONCLUSIONES: Es necesario el uso de métodos alternativos de ponderación y la estrategia de selección de variables externas para construcción de pesos de post-estratificación que minimicen el vicio potencial de las estimaciones de las variables consecuentes de la baja cobertura de domicilios con teléfono fijo. .
OBJECTIVE To evaluate the effects of using post-stratification weight to correct the bias due to low coverage of households with telephones. METHODS A Comparison was made of results collected by the Household Survey with those of the VIGITEL (Telephone Survey to Monitor Risk and Protective Factors for Chronic Diseases) in Rio Branco, Northern Brazil, in 2007 whose coverage was 40% of landline phones. The potential bias in the VIGITEL survey was expressed by the difference between the rates of prevalence of the VIGITEL and Household Survey, calculated as the square root mean square error (MSE) as a measure of the accuracy of the estimate. RESULTS The weighting procedure of VIGITEL corrected potential bias in the prevalence of consumption of fruit and vegetables, meat with visible fat, smoking, bad self-assessment of health status and morbidity of cholesterol or triglycerides. In the prevalence of physical activity in leisure time and morbidity of asthma, bronchial asthma, chronic bronchitis or emphysema, the procedure adopted by VIGITEL did not reduce the potential bias. CONCLUSIONS in order to construct post-stratification weights which minimize the potential bias in estimates of the variables due to low coverage of households with landlines, it becomes necessary to use alternative methods of weighting and strategies of selecting external variables. .
Subject(s)
Adolescent , Adult , Aged , Aged, 80 and over , Female , Humans , Male , Middle Aged , Young Adult , Population Surveillance/methods , Telephone , Bias , Brazil , Educational StatusABSTRACT
El cuestionario es ampliamente utilizado en el sector salud para recolectar información y se ha habido alguna discusión sobre la extensión y las fuentes de sesgos u errores que afectan la validez de la información obtenida, pero no hay una clara conciencia de la magnitud ni de la diversidad de los mismos. Se presentan y discuten los más resaltantes errores o sesgos en cuestionarios en el sector salud, basándonos en el trabajo previo de Choi y Pak. Objetivo: Este artículo intenta contribuirá a llevar al tapete de discusión el tema de los mecanismos y la dinámica de potenciales sesgos en cuestionarios del sector salud. Método: se realizó revisión de la literatura y se identificaron ejemplos extraídos de cuestionarios utilizados en diferentes proyectos, disponibles en forma impresa o en portales de internet de acceso público. Resultados: Se identificaron 48 tipos diferentes de sesgo, se discute cada uno y se presentan formas de minimizarlos o evitarlos. Presenta una tabla resumen que se podría usar como tabla de cotejo, útil para prevenir y minimizar los potenciales sesgos. Discusión: el cuestionario es una herramienta común en diversas actividades del sector salud, no obstante se imparte poca capacitación formal sobre su uso en la mayoría de las especialidades del sector. Este artículo permite reducir la posibilidad de errores o sesgos que pueden invalidar la información, al presentar las posibilidades de error de una forma útil y accesible al usuario no experto en la materia