Instrumento para condução de observação social sistemática: métodos e resultados da concordância interobservadores / A systematic social observation tool: methods and results of inter-rater reliability / Instrumento para la realización de observaciones sociales sistemáticas: métodos y resultados de la adecuación entre observadores

RESUMO

A observação social sistemática tem sido utilizada para a coleta de informações do entorno físico e social da vizinhança. Os objetivos deste artigo foram descrever a operacionalização da observação social sistemática do entorno físico e social de vizinhanças urbanas e avaliar a concordância do instrumento utilizado. O instrumento foi elaborado para coleta de informações em diferentes domínios. No total, 1.306 segmentos de rua, pertencentes a 149 diferentes vizinhanças de Belo Horizonte, Minas Gerais, Brasil, foram observados. Para o estudo de concordância, 149 segmentos foram reauditados. Para se estabelecer a concordância, foi utilizado o kappa Fleiss interobservador. A concordância média dos itens foi 0,57 (DP = 0,24); 53% tiveram concordância substancial ou quase perfeita; 20,4%, moderada. O instrumento se mostrou adequado para observação de características com maior estabilidade temporal, principalmente quanto a serviços, caracterização dos imóveis, ambiente para pedestres e segurança.

ABSTRACT

Systematic social observation has been used as a health research methodology for collecting information from the neighborhood physical and social environment. The objectives of this article were to describe the operationalization of direct observation of the physical and social environment in urban areas and to evaluate the instrument's reliability. The systematic social observation instrument was designed to collect information in several domains. A total of 1,306 street segments belonging to 149 different neighborhoods in Belo Horizonte, Minas Gerais, Brazil, were observed. For the reliability study, 149 segments (1 per neighborhood) were re-audited, and Fleiss kappa was used to access inter-rater agreement. Mean agreement was 0.57 (SD = 0.24); 53% had substantial or almost perfect agreement, and 20.4%, moderate agreement. The instrument appears to be appropriate for observing neighborhood characteristics that are not time-dependent, especially urban services, property characterization, pedestrian environment, and security.

RESUMEN

La observación social sistemática ha sido utilizada para recabar información del ambiente físico y social del vecindario. Este artículo tiene como objetivo describir la operacionalización de la observación social sistemática del ambiente físico y social de vecindarios urbanos y evaluar la adecuación del instrumento utilizado. El instrumento fue elaborado para realizar la recogida de información en diferentes dominios. En total, fueron observados 1.306 segmentos de calle, pertenecientes a 149 vecindarios diferentes de Belo Horizonte, Minas Gerais, Brasil. Para el estudio de la adecuación, 149 segmentos fueron revaluados y el kappa Fleiss se utilizó para acceder a la adecuación entre observadores. La adecuación promedio de los ítems fue de 0,57 (DP = 0,24); un 53% tuvieron una adecuación sustancial o casi perfecta y un 20,4% moderada. El instrumento se mostró adecuado para la observación de características con mayor estabilidad temporal, principalmente en cuanto a servicios, caracterización de los inmuebles, ambiente para peatones y seguridad.