Meta-evaluation of a participatory process in the strengthening of municipal management / Meta-avaliação de um processo participativo no fortalecimento da gestão municipal

ABSTRACT

ABSTRACT OBJECTIVE To evaluate, with a focus on participation, an evaluation process developed by municipal managers and administrators of a health region in the state of São Paulo, considering the need for theoretical reflection on participatory health practices in the Brazilian context. METHODS Qualitative research that used the framework developed by Daigneault and Jacob (2009) to analyze the empirical material, encompassing three dimensions of participation control of the evaluation process, diversity of participants, and extent of their involvement. We highlighted decisions or contextual aspects that deepened or limited the participatory option in the process under study. RESULTS We identified the presence and important performance of stakeholders who are "not specialists in evaluation", through participation both in the direction of the evaluation process and in its distinct stages. The formed group started from their own annoyances added to the need for information and reflection to define the subject and scope of the evaluation; the use of the process planned by them guided the definition of the data to be collected and the format of result dissemination; the empirical material analysis was undertaken jointly by the participants. Regarding the third dimension, a limitation was identified regarding the diversity of actors involved due to the prioritization of the possibility of in-depth work with a fixed group of managers. CONCLUSIONS It is stated that there is no "ideal participation model" for evaluations. In certain contexts and structures, real opportunities for participation - even if they seem fragile at first sight - should be leveraged, and that requires flexibility and critical reflection on the part of those responsible for the evaluation processes to undertake the necessary adjustments.

RESUMO

RESUMO OBJETIVO Meta-avaliar, com foco na participação, um processo avaliativo desenvolvido por secretários e assessores municipais de uma região de saúde do estado de São Paulo, tendo em vista a necessidade de reflexão teórica sobre práticas de avaliação participativa na área da Saúde no contexto brasileiro. MÉTODOS Pesquisa qualitativa que utilizou, para análise do material empírico, o referencial desenvolvido por Daigneault e Jacob (2009), englobando três dimensões da participação direção do processo avaliativo, diversidade dos participantes e extensão do envolvimento dos mesmos. Foram destacadas decisões ou aspectos contextuais que fizeram com que a opção participativa fosse aprofundada ou limitada no processo em foco. RESULTADOS Identificou-se a presença e importante atuação de atores interessados "não especialistas em avaliação", por meio da participação tanto na direção do processo avaliativo como em suas diferentes etapas. O grupo formado partiu de seus próprios incômodos somados à necessidade de informação e reflexão para a definição do tema e escopo da avaliação; a utilização do processo por eles planejada guiou a definição dos dados a serem coletados e o formato da disseminação dos resultados; a análise do material empírico foi empreendida de forma conjunta pelos participantes. No tocante à terceira dimensão, foi identificada uma limitação quanto à diversidade de atores envolvidos em função da priorização da possibilidade de trabalho aprofundado com um grupo fixo de gestores. CONCLUSÕES Afirma-se que não existe um "modelo ideal de participação" para avaliações. Em determinados contextos e estruturas, oportunidades reais de participação - mesmo que pareçam frágeis à primeira vista - devem ser aproveitadas, exigindo, para tanto, flexibilidade e reflexão crítica por parte dos responsáveis pelos processos avaliativos, visando a empreender as adequações que se fizerem necessárias.