Dynamic network data envelopment analysis for university hospitals evaluation / Análise envoltória de dados dinâmica em redes na avaliação de hospitais universitários

ABSTRACT OBJECTIVE To develop an assessment tool to evaluate the efficiency of federal university general hospitals. METHODS Data envelopment analysis, a linear programming technique, creates a best practice frontier by comparing observed production given the amount of resources used. The model is output-oriented and considers variable returns to scale. Network data envelopment analysis considers link variables belonging to more than one dimension (in the model, medical residents, adjusted admissions, and research projects). Dynamic network data envelopment analysis uses carry-over variables (in the model, financing budget) to analyze frontier shift in subsequent years. Data were gathered from the information system of the Brazilian Ministry of Education (MEC), 2010-2013. RESULTS The mean scores for health care, teaching and research over the period were 58.0%, 86.0%, and 61.0%, respectively. In 2012, the best performance year, for all units to reach the frontier it would be necessary to have a mean increase of 65.0% in outpatient visits; 34.0% in admissions; 12.0% in undergraduate students; 13.0% in multi-professional residents; 48.0% in graduate students; 7.0% in research projects; besides a decrease of 9.0% in medical residents. In the same year, an increase of 0.9% in financing budget would be necessary to improve the care output frontier. In the dynamic evaluation, there was progress in teaching efficiency, oscillation in medical care and no variation in research. CONCLUSIONS The proposed model generates public health planning and programming parameters by estimating efficiency scores and making projections to reach the best practice frontier.

RESUMO OBJETIVO Desenvolver ferramenta de avaliação de eficiência de hospitais universitários federais de perfil geral. MÉTODOS A análise envoltória de dados, técnica de programação linear, constrói uma fronteira de melhores práticas pela comparação da produção observada dadas as quantidades de recursos despendidas. O modelo é orientado a produto, e considera retornos variáveis de escala. A análise envoltória de dados em redes considera variáveis de ligação que pertencem a mais de uma dimensão (no modelo, médicos residentes, internações ajustadas e projetos de pesquisa). A análise envoltória de dados dinâmica usa variáveis de transporte (no modelo, receita) para analisar o deslocamento da fronteira em anos subsequentes. Os dados foram coletados do sistema de informações do MEC, 2010 a 2013. RESULTADOS Os escores médios de assistência, ensino e pesquisa no período foram: 58,0%, 86,0% e 61,0%, respectivamente. Em 2012, ano de melhor desempenho, para que todas as unidades atingissem a fronteira, seria necessário aumento médio de consultas de 65,0%; de internações, de 34,0%; de alunado de graduação, de 12,0%, de residência multiprofissional, de 13,0%, de pós-graduação, de 48,0%; de projetos de pesquisa, de 7,0%; além de queda de 9,0% de residentes médicos. No mesmo ano, para melhora da fronteira de produção assistencial, seria necessária a injeção de um aporte adicional de receita de 0,9%. Observou-se progressão da eficiência no ensino; oscilação na assistência e estagnação na pesquisa na avaliação dinâmica. CONCLUSÕES O modelo proposto gera parâmetros de planejamento e programação em saúde pública por meio do cálculo dos escores de eficiência e das projeções necessárias para alcance das fronteiras de melhores práticas.

Avaliação da eficiência dos serviços de saúde por meio da análise envoltória de dados. / Health services efficiency assessment by data envelopment analysis.

A epidemiologia de serviços de saúde é um campo multidisciplinar de investigação científica, porém a literatura sobre a pesquisa avaliativa não tem enfatizado estudos de eficiência. No campo da pesquisa operacional (PO), a metodologia mais frequentemente escolhida para abordagem de eficiência em saúde é a Análise Envoltória de Dados (DEA, do inglês data envelopment analysis), não paramétrica, baseada em programação linear. Neste trabalho, buscou-se apresentar essa metodologia de forma mais detalhada e compreensível para os profissionais de saúde e gestores, e realizou-se uma revisão da literatura sobre o estado de arte do conhecimento adquirido com as aplicações da técnica quando usada para avaliação de serviços de saúde nos últimos 30 anos. Desde 1983, foram publicados 189 artigos, predominantemente em periódicos que enfatizam administração e avaliação de sistemas e serviços de saúde. Verificou-se maior disseminação da técnica a partir do século 21 (76% das publicações), atualmente usada em todos os continentes, principalmente para apoio à tomada de decisões relacionadas a políticas públicas e sistemas locais de saúde, e na comparação com outras medidas de eficiência. DEA pode ser considerada uma ferramenta importante para pesquisadores e gestores no estudo de eficiência e na formulação de políticas de saúde.

The Health Services Epidemiology is a multidisciplinary of scientific investigation; nevertheless, the efficiency assessment approach has not been emphasized in the last few years. According to Operations Research (OR) discipline, in order to cope with efficiency studies, the methodology more frequently used is the non-parametric, linear programming-based, Data Envelopment Analysis (DEA). This paper intended to show a detailed and intelligible presentation of the methodology to be used among health professionals and managers, and to proceed a literature review on the state of art of the knowledge acquired from health services efficiency evaluations in the last 30 years. Since 1983, 189 papers were published, mainly in journals that emphasize management and evaluation of health systems and services. In this century, a dissemination of the technique was observed (76% of the papers), nowadays used in all world continents, mainly to aid health policy and local health systems decision making, along with studies that compare DEA with other efficiency approaches. DEA can be considered an important tool for researchers and decision makers to study efficiency and to formulate health policies.

Avaliação de desempenho e integração docente-assistencial nos hospitais universitários / Evaluación del desempeño e integración docente-asistencial en los hospitales universitarios / Assessment of teaching-health care integration and performance in university hospitals

OBJETIVO: Avaliar o desempenho e a integração entre as dimensões de assistência e de ensino dos hospitais universitários brasileiros. MÉTODOS: Um modelo de data envelopment analysis em redes (network DEA) foi elaborado para aferir o desempenho de hospitais universitários federais, o qual permite considerar a relação entre as dimensões de ensino e de assistência, simultaneamente. Foram utilizados os dados do Sistema de Informação dos Hospitais Universitários do Ministério da Educação, referentes ao segundo semestre de 2003, e os resultados do modelo network foram comparados àqueles dos modelos DEA tradicionais para avaliação das vantagens da nova proposta metodológica. RESULTADOS: A eficiência dos hospitais avaliados variou entre 0,19 e 1,00 (média = 0,54)...

OBJECTIVE: To assess the performance and integration between the health care and teaching dimensions in Brazilian university hospitals. METHODS: A network data envelopment analysis (DEA) model was designed to measure the performance of federal university hospitals, which enables the relationship between the teaching and health care dimensions to be considered simultaneously. Data from the Ministry of Education Information System of University Hospitals, in the second semester of 2003, were used. Results of the network model were compared to those of classical DEA models to assess the advantages of the new methodological proposal. RESULTS: The efficiency of the hospitals assessed varied between 0.19 and 1.00 (mean = 0.54)...