Assessing the risk of bias in randomized controlled trials in the field of dentistry indexed in the Lilacs (Literatura Latino-Americana e do Caribe em Ciências da Saúde) database / Avaliação do risco de viés de ensaios controlados randomizados de odontologia indexados na base de dados Lilacs (Literatura Latino-Americana e do Caribe em Ciências da Saúde)

CONTEXT AND OBJECTIVE: Well-conducted randomized controlled trials (RCTs) represent the highest level of evidence when the research question relates to the effect of therapeutic or preventive interventions. However, the degree of control over bias between RCTs presents great variability between studies. For this reason, with the increasing interest in and production of systematic reviews and meta-analyses, it has been necessary to develop methodology supported by empirical evidence, so as to encourage and enhance the production of valid RCTs with low risk of bias. The aim here was to conduct a methodological analysis within the field of dentistry, regarding the risk of bias in open-access RCTs available in the Lilacs (Literatura Latino-Americana e do Caribe em Ciências da Saúde) database. DESIGN AND SETTING: This was a methodology study conducted at Universidade Federal de São Paulo (Unifesp) that assessed the risk of bias in RCTs, using the following dimensions: allocation sequence generation, allocation concealment, blinding, and data on incomplete outcomes. RESULTS: Out of the 4,503 articles classified, only 10 studies (0.22 percent) were considered to be true RCTs and, of these, only a single study was classified as presenting low risk of bias. The items that the authors of these RCTs most frequently controlled for were blinding and data on incomplete outcomes. CONCLUSION: The effective presence of bias seriously weakened the reliability of the results from the dental studies evaluated, such that they would be of little use for clinicians and administrators as support for decision-making processes.

CONTEXTO E OBJETIVO: Ensaios controlados randomizados (ECRs) bem conduzidos representam o mais alto nível de evidência quando a pergunta de pesquisa é sobre o efeito de intervenções terapêuticas ou preventivas. No entanto, o grau de controle de viés entre os ECRs apresenta grande variabilidade entre estudos. Por esta razão, com o aumento do interesse e produção das revisões sistemáticas e metanálises, foi necessário desenvolver metodologia suportada por evidência empírica, para incentivar e valorizar a produção de ECRs válidos e com baixo risco de viés. O objetivo deste trabalho foi realizar uma análise metodológica da área de odontologia quanto ao risco de viés de ECRs de acesso aberto, disponibilizados no banco de dados do Lilacs (Literatura Latino-Americana e do Caribe em Ciências da Saúde). TIPO DE ESTUDO E LOCAL: Trata-se de um estudo sobre metodologia conduzido na Universidade Federal de São Paulo (Unifesp) que avaliou o risco de viés dos ECRs, utilizando as seguintes dimensões: geração da sequência de alocação, sigilo da alocação, cegamento e dados sobre desfechos incompletos. RESULTADOS: Dos 4.503 artigos classificados somente 10 (0,22 por cento) estudos foram considerados verdadeiros ECR e, destes, somente um estudo foi classificado como sendo de baixo risco de viés. Os itens mais frequentemente controlados pelos autores dos ECR foram cegamento e dados sobre desfechos incompletos. CONCLUSÃO: A presença efetiva de viés enfraqueceu seriamente a confiança nos resultados dos estudos de odontologia avaliados, sendo pouco úteis para clínicos e gestores como suporte a processos de decisão.

Evidence in dentistry guidelines / Evidências nos guidelines de odontologia

CONTEXT AND OBJECTIVE: Guidelines are suggestions for clinical practice based on the best available scientific evidence. Nevertheless, in drafting such guidelines, existing systematic reviews are often ignored and are replaced by general consensuses. This ends up compromising the quality of the instructions through bias. Our objective was to investigate whether Cochrane systematic reviews were present among the bibliographic references of prevention and treatment guidelines for dentistry that have been published in databases. DESIGN AND SETTING: This retrospective, observational study was conducted at the Brazilian Cochrane Center. METHODS: The databases were searched for guidelines. Any guidelines obtained were then checked to find whether Cochrane systematic reviews were present in the bibliographic references of the guidelines. In their absence, we checked whether such reviews had not been included because no reviews existed yet, or because such reviews had not been consulted despite already existing. RESULTS: 223 studies were initially selected; of these, 77 were excluded. Of the 146 guidelines included, 46 could have made reference to existing systematic reviews, but only 13 studies did so. Among these 13 studies, eight were systematic reviews following Cochrane methodology. Thirty-three guidelines had not been drafted using published systematic reviews as references, and 100 guidelines had been unable to use Cochrane references because no reviews existed yet. CONCLUSION: It is necessary to increase awareness of the importance of using systematic reviews in drafting dentistry guidelines. Likewise, it is necessary to develop systematic reviews that answer questions on the various topics that remain unanswered.

CONTEXTO E OBJETIVO: Diretrizes são sugestões de condutas clínicas baseadas nas melhores evidências científicas disponíveis. No entanto, muitas vezes, para a construção da diretriz, as revisões sistemáticas existentes são desconsideradas e substituídas por consensos, o que acaba comprometendo a qualidade das suas instruções por serem enviesadas. O objetivo foi verificar a presença das revisões sistemáticas Cochrane nas referências bibliográficas das diretrizes de prevenção e tratamento na odontologia publicados nas bases de dados. LOCAL E TIPO DE ESTUDO: Estudo retrospectivo observacional, conduzido no Centro Cochrane do Brasil. MÉTODOS: Busca das diretrizes foi realizada nas bases de dados. A partir da obtenção delas, foram checadas a existência de revisões sistemáticas Cochrane nas suas referências bibliográficas. Na sua ausência, era verificada se a revisão sistemática não foi incluída porque ainda não existe ou porque, existindo, não foi consultada. RESULTADOS: Foram previamente selecionados 223 estudos, e destes, 77 foram excluídos. Das 146 diretrizes incluídas, 46 poderiam incluir em suas referências as revisões sistemáticas existentes, mas apenas 13 estudos o fizeram, dentre eles somente 8 eram revisões sistemáticas com metodologia Cochrane. Trinta e três diretrizes não usaram para a sua construção as referências de revisões sistemáticas já publicadas e em 100 delas não seria possível a inclusão das referências Cochrane por ainda não existirem as revisões. CONCLUSÕES: É necessária a conscientização da importância do uso das revisões sistemáticas na construção de diretrizes em odontologia, bem como o desenvolvimento de revisões sistemáticas que respondam perguntas que versam sobre os diversos temas ainda não respondidos.