Confiabilidad de una escala de valoración de resúmenes para congresos

Introducción: En 2013, desarrollamos una escala, para evaluar resúmenes de congresos de la Sociedad de Cirujanos de Chile (SOCICH). Objetivo: Determinar consistencia interna y confiabilidad interobservador de una escala para evaluar resúmenes de congresos. Material y Método: Estudio de confiabilidad. Doce cirujanos fueron capacitados de forma virtual durante 8 horas, para aplicar la escala. Una vez finalizado el entrenamiento, se les envió un cuestionario para evaluar contenidos de la capacitación, y varios resúmenescasos para ser evaluados con la escala antes señalada. Se aplicó estadística descriptiva, luego se estimó el grado de acuerdo entre observadores para cada ítem de la escala. Posteriormente, se evaluó el coeficiente de correlación (CCI), utilizando un modelo de dos factores mixtos en el que los efectos de los evaluadores son aleatorios y los ítems fijos; utilizando una definición de acuerdo absoluto. Además, se evaluó la consistencia interna de los ítems utilizando alfa de Cronbach, considerando intérvalos de confianza del 95% (IC 95%). Resultados: Luego de analizar las mediciones de los 9 ítems por los 12 observadores, se verificó que el CCI fue de 0,871; con un IC 95% de 0,700; 0,965. El valor de la consistencia interna fue de 0,7 considerando los 9 ítems, no se recomienda eliminar ningún ítem. Conclusión: La escala tiene buena confiabilidad interobservador y los ítems son consistentes entre sí; por lo que puede ser considerada como un instrumento confiable para la valoración de resúmenes de congresos.

Background: In 2013, we developed a scale to evaluate the abstracts of the congresses of the Society of Surgeons of Chile (SOCICH). Objective: To determine internal consistency and interobserver reliability of a scale to evaluate conference abstracts. Material and Methods: Reliability study. Twelve surgeons were trained virtually for 8 hours, to apply the scale. Once the training was finished, they were sent a questionnaire to evaluate the contents of the training, and several summaries-cases to be evaluated with the aforementioned scale. Descriptive statistics were applied, then the degree of agreement between observers was estimated for each item of the scale. Subsequently, intraclass correlation coefficient (ICC) was evaluated, using a mixed two-factor model where the effects of the evaluators are random and the items are fixed, using a definition of absolute agreement. In addition, the internal consistency of the items was evaluated using Cronbach's alpha, considering 95% confidence intervals (95% CI). Results: After analyzing the measurements of the 9 items by the 12 observers, it was verified that the ICC was 0.871; with a 95% CI of 0.700; 0.965. The internal consistency value was 0.7 considering the 9 items, it is not recommended to delete any item. Conclusions: The scale has good internal consistency and interobserver reliability. Therefore, it can be considered as reliable instrument to be used in the evaluation of abstracts for congresses.

Taller de concordancia en la evaluación de imágenes capilaroscópicas / Reliability of nailfold videocapillaroscopy workshop

Introducción: la capilaroscopia es un método no invasivo que permite observar la microvasculatura en el área periungueal. Los resultados informados pueden ser altamente variables entre distintos observadores. A lo largo del tiempo surgieron métodos cuantitativos y semicuantitativos para mejorar la reproducibilidad. Objetivos: conocer el nivel de acuerdo intra e interobservador al informar los diferentes patrones capilaroscópicos en individuos con diferente nivel de entrenamiento. Materiales y métodos: estudio de corte transversal. Participaron médicos reumatólogos especialistas y en formación que habían realizado previamente un curso virtual de capacitación en capilaroscopia. Recibieron 40 imágenes capilaroscópicas proyectadas en una presentación de PowerPoint y debían responder a través de un cuestionario digital. Se evaluó la concordancia de respuestas intra e interobservador. Resultados: se encontró un alto nivel de concordancia global con un kappa 0,66 IC 95% (0,63-0,70) p<0,0000. También en otros grupos como reumatólogos en formación: kappa 0,65 IC 95% (0,60-0,71) p=0,0000, y médicos reumatólogos: kappa 0,67 IC 95% (0,62-0,72) p=0,0000. Conclusiones: el nivel de concordancia encontrado fue globalmente alto, independientemente del nivel de entrenamiento de los profesionales, y de ser o no reumatólogo. La concordancia fue superior cuando se comparó a quienes tenían más de 4 años de experiencia en la realización de videocapilaroscopia.

Introduction: videoapillaroscopy is a non-invasive method that allows the observation of the microvasculature in the periungual area. Reported results can be highly variable between different observers. Over time, quantitative and semi-quantitative methods emerged to improve reproducibility. Objetives: to know the level of intra and interobserver agreement when reporting the different capillaroscopic patterns in individuals with different levels of training. Materials and methods: cross section study. Specialist rheumatologists and those in training who had previously completed a virtual capillaroscopy training course participated. They received 40 capillaroscopic images projected in a PowerPoint presentation and had to issue their response through a digital questionnaire. Concordance of intra and interobserver responses was evaluated. Results: a high level of global agreement was found with a kappa 0.66 CI 95% (0.63-0.70) p<0.0000, also in other groups such as rheumatologists in training: kappa 0.65 CI 95% (0.60-0.71) p=0.0000, physicians rheumatologists: kappa 0.67 95% CI (0.62-0.72) p=0.0000. Conclusions: the level of agreement found was globally high, regardless of the level of training of the professionals, and whether or not they were a rheumatologist. Concordance was higher when compared to those who had more than 4 years of experience performing videocapillaroscopy.

Cohortes de premedicación en endoscopia alta con simeticona, N-acetilcisteína, Hedera helix y validación de la escala visual / Cohorts of premedication for endoscopy of the upper gastrointestinal tract with simethicone, N-acetylcysteine, Hedera helix and visual scale validation

Resumen Los parámetros de calidad para endoscopia digestiva alta han introducido indicadores intraprocedimiento, dentro de los cuales la adecuada visibilidad de la mucosa, libre de saliva, moco o burbujas, puede aumentar la posibilidad de detección de lesiones en fase temprana. Sin embargo, el uso de mucolíticos y antiburbujas ha mostrado gran variabilidad de eficiencia según las soluciones, concentraciones, tiempos de exposición y escala de visibilidad aplicados. Objetivos: determinar la efectividad de diferentes soluciones de premedicación para la limpieza de la mucosa digestiva; validar, mediante una prueba de concordancia interobservador, una nueva escala de adecuada visualización de la mucosa (TVMS) para el esófago, estómago y duodeno; y reportar eventos adversos o complicaciones relacionadas con las soluciones utilizadas y los procedimientos realizados. Material y métodos: estudio de cohortes prospectivas comparativas. Se incluyeron 412 pacientes adultos, ASA I y ASA II, para endoscopia diagnóstica bajo sedación consciente, distribuidos en 6 cohortes similares, divididas en dos grupos: no premedicación, 2 cohortes C1 (ayuno de 6 a 8 horas)y C2 (agua 100 mL); premedicación, 4 cohortes C3 a C6 (C3: agua 100 m L + simeticona 1000 mg; C4: agua 100 mL + simeticona 200 mg + N-acetilcisteína 600 mg; C5: agua 100 mL + simeticona 200 mg + N-acetilcisteína 1000 mg; C6: agua 100 mL + simeticona 200 mg + Hedera helix 70 mg). Se ingirió la solución 15 a 30 minutos antes del paso por cricofaríngeo. Se realizó la prueba de Kappa para medir la concordancia interobservador de la escala TVMS. Resultados: De 412 pacientes, 58% fueron de sexo femenino; 23% (136) fue de cohortes C1 y C2 y 67% (276) fue de cohortes C3 a C6. El tiempo medio de exposición a cada solución fue de 24,4 minutos. El volumen de lavado para lograr una adecuada visualización fue significativamente diferente entre ambos grupos: en los pacientes con premedicación se utilizaron 75,6 mL, mientras que en los pacientes sin premedicación se utilizaron 124 mL (p = 0,000), con una calidad de TVMS excelente de 88,7% frente al 41,4%, respectivamente. La cohorte C4 (agua 100 mL + simeticona 200 mg + N-acetilcisteína 600 mg) mostró ser la más efectiva con una diferencia significativa (p = 0,001) frente a C1 (ayuno) y C2 (placebo con agua 100 mL), y también tuvo una eficiencia superior frente a C3, C5 y C6 en su orden. No se presentaron eventos adversos o complicaciones en relación con la endoscopia, la sedación y los productos usados en la premedicación. Conclusiones: la solución más efectiva como premedicación para lograr una excelente visibilidad de la mucosa digestiva correspondió a la cohorte C4 (SIM 200 + NAC 600 + H2O 100 mL). La escala TVMS propuesta es una herramienta muy completa y fácil de aplicar por más de un observador. La premedicación ingerida, con antiburbuja, mucolítico y agua hasta 100 mL, entre 15 y 30 minutos previos a endoscopia, es segura en las condiciones descritas en este estudio.

Abstract Quality parameters for upper gastrointestinal endoscopy have introduced intraprocedural indicators, including adequate mucosal visualization free of saliva, mucus, or bubbles, which may increase the possibility of early-stage injury detection. The use of mucolytics and anti-foaming agents has shown great efficiency variability depending on the type of solution, concentrations, exposure times and visibility scale applied. Objectives: To determine the effectiveness of different premedication solutions for cleaning the digestive mucosa; to validate, by means of an interobserver concordance test, a new scale for the adequate visualization of the mucosa (TVMS) for the esophagus, stomach, and duodenum; and to report adverse events or complications associated with the solutions used and the procedures performed. Material and methods: Prospective, comparative cohort study. 412 adult patients, ASA I and ASA II, were included for diagnostic endoscopy under conscious sedation. They were distributed in 6 similar cohorts and divided into two groups: non-premedication, 2 in C1 (fasting 6 to 8 hours) and C2 (water 100 mL) cohorts; premedication, 4 C3 to C6 cohorts (C3: water 100 mL + simethicone 1000 mg; C4: water 100 ml + simethicone 200 mg + N-acetylcysteine 600 mg; C5: water 100 ml + simethicone 200 mg + N-acetylcysteine 1000 mg; C6: water 100 ml + simethicone 200 mg + Hedera helix 70 mg). The solution was swallowed 15 to 30 minutes passing through the cricopharyngeus muscle. The Kappa test was performed to measure interobserver concordance of the TVMS scale. Results: Of 412 patients, 58% were female; 23% (136) were included in the C1 and C2 cohorts; and 67% (276) were in the C3 to C6 cohorts. The average exposure time to each solution was 24.4 minutes. The wash volume for proper visualization was significantly different between the two groups. In premedicated patients, 75.6 mL of solution were used, while in patients without premedication, 124 mL were used (p = 0.000), with an excellent quality of TVMS of 88.7% versus 41.4%, respectively. The C4 cohort (water 100 mL + simethicone 200 mg + N-acetylcysteine 600 mg) was the most effective with a significant difference (p= 0.001) compared with the C1 (fasting) and C2 (placebo with water 100 mL) cohorts. It also had better efficiency compared to the C3, C5 and C6 cohorts in that order. There were no adverse events or complications associated with endoscopy, sedation, or premedication products. Conclusions: The most effective solution as a premedication to achieve excellent visibility of the digestive mucosa was that used in the C4 cohort (SIM 200 + NAC 600 + H2OR 100 mL). The proposed TVMS scale is a very complete and easy tool to apply by more than one observer. Premedication ingested, with anti-foam, mucolytic and water up to 100 mL, between 15 and 30 minutes before endoscopy, is safe under the conditions described in this study.

Valor diagnóstico de las clasificaciones outerbridge e ICRS para la clasificación artroscópica de lesiones condrales de rodilla / Diagnostic value of outerbridge and ICRS classifications for arthroscopic grading of chondral lesions in the knee

OBJETIVOS: Determinar el rendimiento de las clasificaciones de Outerbridge (OB) e International Cartilage Repair Society (ICRS). MÉTODO: Estudio de test diagnóstico, diseño y recolección de datos prospectivo. Siete traumatólogos sub-especialistas observaron un mismo video donde se exponían 30 lesiones condrales bajo visión artroscópica, para luego clasificarlas según OB e ICRS y consignar el tratamiento de elección para cada una de las lesiones, eligiendo entre 6 alternativas: observación, debridamiento mecánico o térmico, microfractura, OATS o terapias biológicas. Tras 7 días, los evaluadores debían repetir el mismo procedimiento. RESULTADOS: La concordancia entre los observadores fue débil para clasificación de ICRS (k 0,25 p < 0,001) y moderada para la clasificación de OB (k 0,45 p < 0,001). La concordancia intra-observador para ICRS oscilaba entre moderada y excelente (k promedio de 0,67), y para la clasificación de OB entre buena y excelente (k promedio 0,83). Ninguna de las dos clasificaciones mostró correlación con la experiencia del cirujano. En la elección de tratamiento, la concordancia entre observadores fue débil (k 0,33 p < 0,001), sin embargo, la concordancia intra-observador fue en todos los casos buena o excelente (k 0,82), mostrando una correlación directamente proporcional a la experiencia del cirujano. La capacidad de discriminación terapéutica, evaluada mediante una regresión logística, mostró un área bajo la curva roc en el rango del no-efecto. CONCLUSIÓN: Ambas clasificaciones mostraron una baja correlación inter-observador y una elevada concordancia intra-observador. En ambas categorías, Outerbridge fue más concordante que ICRS. En cuanto al tratamiento, ninguna de las dos clasificaciones logra unificar criterios quirúrgicos. NIVEL DE EVIDENCIA: Nivel I (test diagnóstico).

OBJECTIVES: Assess de diagnostic accuracy of Outerbridge (OB) and ICRS (International Cartilage Repair Society) classifications. METHODS: We performed a diagnostic test study, with a prospective design and data collection. Seven knee surgeons were asked to observe a video were the 30 chondral lesions were shown through arthroscopic view. Simultaneously they were asked to classify them according to OB and ICRS. Besides, they had to define how they would manage the chondral lesion, choosing among six treatment options (observation, mechanical or thermic chondroplasty, microfracture, osteochondral autologous transfer system (OATS) or biological therapies). A week later, they repeated the same procedure. Intra and interobserver agreement were characterized by κ statistical analysis, and a logistic regression was used to assess the ability of both classifications to discriminate among treatment options. P values < 0,05 were considered significant. RESULTS: Interobserver agreement was weak (κ 0.25 p < 0.001) for ICRS classification and moderate for OB classification (κ 0.45 p < 0.001). Intraobserver agreement for ICRS ranged from moderate to excellent (average κ of 0.67), and for the OB classification ranged from good to excellent (average kappa 0.83). Neither classification correlated with the surgeon's experience. Interobserver agreement for therapeutic choice was poor (κ 0.33 p < 0.001). However, intraobserver agreement was good to excellent (κ 0.82) in all cases, showing a direct correlation with the surgeon's experience. Logistic regression used to assess the ability of both classifications to discriminate among treatment options, showed in both cases an area under the roc curve in the no-effect range. CONCLUSION: Both classifications showed low interobserver and high intraobserver agreements for arthroscopic grading of chondral lesions. In both, Outerbridge was more reliable than ICRS. As for guiding therapeutic management, none of the classifications could unify surgical criteria.

Concordancia entre observadores de videos de pacientes con sospecha diagnóstica de autismo y psicosis infantiles / Inter-rater Reliability in Videos of Patients with a Suspected Diagnostic of Autism and Child Psychosis

RESUMEN Introducción: Dados la complejidad del abordaje y el tratamiento del autismo y las psicosis infantiles y el impacto que tienen en la vida del niño y su familia, es fundamental ser cautos a la hora de hacer un diagnóstico que tiene implicaciones pronosticas. Se utiliza la perspectiva psicodinámica para acceder a la posibilidad de incluir en el diagnóstico aspectos tanto patológicos como sanos y promover el potencial evolutivo de cada paciente. Objetivo: Determinar la concordancia entre evaluadores y evaluar cuantitativa y cualitativa mente las variables que influyen en el diagnóstico de pacientes con sospecha de autismo y psicosis infantiles desde la perspectiva psicodinámica. Métodos: Se realizó un estudio de concordancia entre observadores basado en la evaluación diagnóstica de videos de pacientes con sospecha de autismo o psicosis infantiles que asisten a junta diagnóstica (sesión de observación) en el Instituto de Ortopedia Infantil Roosevelt. Resultados: Se obtuvieron valores de kappa que oscilaron en general entre 0,24 y 0,50, con una fuerza de concordancia que varió de leve a moderada y K = 0,24 para la organización de personalidad. Esta manera de diagnosticar toma en consideración los aspectos tanto patológicos como saludables que constituyen la organización de personalidad. Al final se discuten las limitaciones y los puntos que tener en cuenta en los estudios posteriores. Conclusiones: Se recomienda que evalúe al niño con perturbaciones mayores un equipo interdisciplinario, y no un solo observador, pues este espacio favorece la discusión, que es crucial a la hora de establecer un diagnóstico y evita lecturas parciales del funcionamiento psíquico del paciente que consulta.

ABSTRACT Introduction: Diagnosing and treating autism and child psychoses is very difficult; these pathologies impact not only the child's life but also the family as a whole. Therefore caution is required when giving a diagnosis with prognostic implications. We use the psychodynamic perspective in order to take into consideration both pathological and healthy diagnostic aspects, and to promote evolutionary potential of each patient. Objective: To determine the inter-rater reliability and to test quantitatively and qualitati vely the variables involved in the diagnoses of patients with suspected autism and child psychoses, based upon psychodynamic concepts. Methods: An inter-rater reliability study was carried on, based upon the diagnostic evaluation of videos of patients with suspected autism or child psychoses who attended the diagnostic meeting (observation session) at the Instituto de Ortopedia Infantil Roosevelt. Results: Kappa values were obtained, ranging from .24 to .50, with a reliability force varying from slight to moderate, and K=.24 for personality organization. This type of diagnosis takes into account both the pathological and healthy aspects which make up personality orga nization. Finally, limitations and aspects that should be considered in further studies were discussed. Conclusions: The results reinforce the need to evaluate a child with major disorders in an interdisciplinary team, and but a single observer, in order to allow discussion, and debate, and therefore, avoid partial readings of the patient's psychological functioning.

Concordancia Interobservador para la Validación del PI-RADS v2 / Interobserver Agreement for the PI-RADS v2 Validation

Objetivo Evaluar la variabilidad interobservador en el uso de la versión 2.0 del PI- RADS (PI-RADS v2), en lectores experimentados y no experimentados. Materiales y Métodos Estudio retrospectivo de análisis de concordancia de lectores. Entre enero de 2015 y diciembre de 2016, 1.656 sujetos fueron estudiados mediante resonancia magnética multiparamétrica (RMmp) de próstata en nuestra institución. Se estimó la distribución porcentual del reporte en categoría PI-RADS v2, y con esa información, se realizó una selección de 150 casos con esquema de aleatorización estratificada a las distribuciones porcentuales de cada categoría. Dichos casos fueron anonimizados, presentados a tres lectores con cinco, cuatro y dos años de experiencia en lectura de RMmp además de tener más de un año de experiencia en el uso del PI- RADS v2 siendo leídos en forma individual. Los datos resultantes fueron analizados en forma independiente por un cuarto investigador. Resultados El valor de kappa ponderado para los observadores fue de 0,69 (IC 95: 0,64 a 0,75). La mayor concordancia correspondió a los lectores de mayor experiencia, donde alcanza un valor de 0,72 (IC 95%: 0,69 a 0,76). La concordancia entre los valores PI-RADS que determinan seguimiento o bien una intervención de acuerdo a elementos clínicos (1-2-3) y conducta activa (4-5) correspondió a 0,70 (IC 95%: 0,59 a 0,78). Discusión Se logró demostrar un acuerdo sustancial entre radiólogos utilizando el PI- RADS v2 para la detección en RMmp de lesiones sospechosas, mayor entre los dos lectores más experimentados. Sin embargo, la comparación del lector de menor experiencia con los de mayor experiencia también presentó una importante concordancia. Los valores de concordancia entre observadores para PI-RADS 2:4 fueron similares a los reportados en la literatura. Conclusiones El PI-RADSv2 ha demostrado en nuestro centro, con radiólogos dedicados a imágenes de abdomen y estudios de próstata, un alto nivel de acuerdo en la interpretación de la RMmp de próstata, encontrándose a tono con lo reportado en la literatura.

Purpose To evaluate the interobserver variability in the use of the PI-RADS 2.0 version, in experienced and non-experienced readers. Material and Methods Retrospective studyof readers' concordance analysis. Between January 2015 and December 2016, 1656 subjects were studied through multiparametric MRI (RMmp) of prostate in our institution. The percentage distribution of the report was estimated in each PI-RADS category, and a selection of 150 cases with a stratified randomization scheme was made to the percentage distributions of every category. These cases were anonymized, presented to three readers with 5, 4 and 2 years' experience in reading RMmp, and more than one-year experience with PI-RADS v2, and were read individually. The resulting data were analyzed independently by a fourth investigator. Results The weighted kappa value for the observers was 0.69 (IC 95: 0.64 to 0.75). The highest agreement corresponded to the two most experienced readers, where it reached a value of 0.72 (95% CI: 0.69 to 0.76). The concordance between the PI-RADS values that determine follow-up (1-2-3) and active behavior (4-5) corresponded to 0.70 (95% CI: 0.59 to 0.78). Discussion It was possible to demonstrate a substantial agreement between radiologists using the PI-RADS v2 for the detection in RMmp of suspicious lesions, greater among the two most experienced readers. However, the comparison of the less experienced reader with those of greater experience also presented an important concordance. The inter-observer concordance values for PI-RADS 2:4 were like those reported in the literature. Conclusions The PI-RADS v2 has demonstrated, in our center, with radiologists dedicated to abdominal images and prostate studies, a high level of agreement in the interpretation of prostate MRmp.

Clasificación de Neer. Variabilidad interobservador / Interobserver Variability Of Neer Classification

Introducción Hacer objetiva la variabilidad interobservador al evaluar una fractura de húmero proximal utilizando la clasificación de Neer y establecer su utilidad diagnóstica y terapéutica. Materiales y Métodos Formulario digital con 20 casos elegidos al azar de fracturas de húmero proximal, de un mismo hospital entre 2010 y 2014. Cada caso incluyó: edad, sexo, lateralidad y dos proyecciones radiográficas. Evaluado de forma anónima por Traumatólogos, con y sin práctica habitual en cirugía del hombro, de hospitales nacionales e internacionales, indicando estadío de Neer y opción terapéutica adecuada. Se estableció la variabilidad interobservador entre grupos y comparando a todos por igual, calculando el índice de Kappa de Fleiss e interpretándolo según los criterios de Landis y Koch. Resultados 40 respuestas de Traumatólogos, 15 con práctica habitual de cirugía de hombro y 25 no. El índice Kappa de Fleiss medio fue 0,173 en el grupo de Traumatólogos con práctica habitual en cirugía de hombro. Siendo 0,176 en el grupo sin práctica habitual. Al evaluarlos conjuntamente, 0,184. Existe gran variabilidad interobservador en la indicación terapéutica y dentro de la indicación quirúrgica. Discusión El grado de acuerdo obtenido, según los criterios de Landis y Koch, ha sido pobre en todos los grupos en lo que a estadío se refiere y débil en lo referente al tratamiento, no influyendo la experiencia del Traumatólogo. Sería necesaria una clasificación más reproducible ya que la clasificación de Neer presenta la suficiente variabilidad interobservador como para aceptarla como único medio en la toma de decisiones.

Background To study inter-observer variability by evaluating a fracture of the proximal humerus using Neer's classification and to establish its diagnostic and therapeutic utility. Methods A computerised form was used with 20 randomly selected cases of fractures of the proximal humerus, from the same hospital between 2010 and 2014. Each case included: age, gender, laterality, and two radiographic projections. They were anonymously evaluated by Traumatologists, for whom shoulder surgery was routine practice or not, from national and international hospitals. They indicated Neer stage and an appropriate therapeutic option. Interobserver variability was established between groups, and comparing all of them equally, calculating Fleap's Kappa index and interpreting it according to the Landis and Koch criteria. Results A total of 40 responses were obtained from the Traumatologists, 15 of them were shoulder surgery was usual practice and 25 where it was not. The mean Fleap Kappa index was 0.173 in the Traumatologists group were shoulder surgery was usual practice, being 0.176 in the group were it was not usual practice. The overall index was 0.184. There is wide interobserver variability in the therapeutic indication, as well as within the surgical indication. Discussion The level of agreement obtained, according to the criteria of Landis and Koch, was poor in all groups in terms of stage, and weak in terms of treatment. The experience of the Traumatologist had no influence. A more reproducible classification may be necessary since Neer's classification has sufficient interobserver variability to accept it as the sole means of decision making.

Validación de recursos humanos pre-profesionales para la detección de biofilm en niños en edad escolar / Validation of preprofessional resources for detecting biofilm in schoolchildren

Objetivo: Estimar la concordancia para la detección de biofilm dental entre recursos humanos que participan de programas de educación para la salud con diferente nivel de formación profesional. Métodos: Se seleccionó en forma intencionada un grupo deestudiantes de los primeros años de la carrera de odontología que participan como ayudantes en el curso Educación para la Salud (n= 8) (Grupo A). Los examinadores de referencia fueron odontólogos/docentes universitarios que desarrollan acciones sistemáticas de educación para la salud en escuelas públicas de Ciudad Autónoma de Buenos Aires (C.A.B.A.) (n= 2) (Grupo B). Se examinaron 67 escolares (edades 7 a 9 años) previo consentimiento informado de los responsables legales y el asentimiento de los niños/as. Los diagnósticos se realizaron bajo condiciones estandarizadas en la sede escolar. Los pares de examinadores determinaron en cada escolar la presencia de biofilm dental, primero a simple vista y luego con solución reveladora (Índice de O`Leary, 1970). La concordancia se valoró utilizando el coeficiente de correlación intraclase para valores absolutos. La fuerza del grado de acuerdo se valoró según Landis y Koch, 1977. Resultados: El coeficiente de correlación intraclase fue: 1) para el índice de placa visible: medidas individuales = 0,71 IC95 por ciento [0,56-0,81]; promedios = 0,83 IC95 por ciento [0,71-0,90] b) para el índice de O´Leary: medidas individuales = 0,62 IC95 por ciento [0,44-0,75]; promedios = 0,77 IC95 por ciento [0,61-0,86]. Conclusión: los examinadores del Grupo A (recursos humanos pre-reprofesionales) respecto del Grupo B (recursos humanos profesionales) alcanzaron un grado considerable de concordancia para la detección de placa a simple vista y un grado moderado de concordancia para la detección de placa con solución reveladora.

Objective: The aim of this study was to measure inter-observer agreement in the assessment of dental biofilm between subjectsparticipating in health education programs with different levels of professional training. METHODS: In order to perform thisvalidation procedure, a group of undergraduate students in the initial years of the career of dentistry engaged as teaching assistants for aHealth Education Course (n=8) was intentionally recruited (GROUP A). Freshmen dental graduates / teaching assistants whodevelop systematic health educational activities in public schools (n=2). 67 children (ages 7 to 9) were considered reference examiners(GROUP B). Clinical examinations were performed among 67 schoolchildren (ages 7 to 9 years old). Informed consent of children´slegal guardians and assent of children themselves as for participation in the study were obtained. At first, examiners set into pairs,assessed dental biofilm presence/absence in each child visually (Visual Plaque Index). The same procedure was repeated after applyingdisclosing solution (O´Leary Index). The intraclass correlation index (ICI) was used to establish interobserver agreement whereas theLandis-Koch criteria was used to interpret the results. RESULTS: The intraclass correlation index was 1) Visual Plaque Index:individual measures = 0,71 IC95% [0,56-0,81]; average measures = 0,83 IC95% [0,71-0,90] b) O´Leary Index: individualmeasures = 0,62 IC95% [0,44-0,75]; average measures = 0,77 IC95% [0,61-0,86]. CONCLUSION: examiners fromGROUP A (undergraduate students) respect to those from GROUP B (graduates) reached a substantial agreement in the assessment ofdental biofilm visually and a moderate degree of agreement in the assessment of dental biofilm using disclosing solution.

Acuerdo intra-interobservador en las pruebas Minimental State Examination (MMSE) y Montreal Cognitive Assessment (MoCA test) aplicados por personal en entrenamiento / Intra and interrater reliability of the Minimental State Exmination (MMSE) and Montréal Cognitive Assessment (MoCA test) applied by health personnel in training

Introducción: en el proceso del diagnóstico neuropsicológico, los instrumentos de tamizaje cognitivo, son una herramienta útil en la identificación de cambios mentales del sujeto, en momentos puntuales o a través del tiempo. Su uso se fundamenta en el análisis psicométrico. Objetivo: determinar el acuerdo inter e intra-observador en el MoCA test y el MMSE, aplicado por profesores y estudiantes en procesos de entrenamiento de tamización cognitiva. Materiales y métodos: a los estudiantes y profesores en entrenamiento en la puntuación del MoCA test y el MMSE, se les presentó un video en dos sesiones, con un intervalo de 5 meses, mostrando el desempeño de dos adultos mayores, respondiendo el MoCA test y el MMSE, previo consentimiento informado. Se compararon los puntajes dados en las dos sesiones por los sujetos en entrenamiento, con los de ellos mismos (intra-observador), usando el coeficiente de concordancia y correlación de Lin(rho) y con los del grupo restante (inter-observador) usando el coeficiente de correlación intra-clase (ICC). Resultados: participaron 46 evaluadores. Se encontró alta confiabilidad inter-observador para el MoCA (ICC=0.86), pero baja para el MMSE (ICC=0.24) y baja confiabilidad intra-observador tanto para el MoCA (rho paciente 1=0.012 y rho paciente 2=0.152) como para el MMSE (rho paciente 1=0.008 y rho paciente 2=0.012). Aunque los puntajes difirieron, las clasificaciones diagnósticas realizadas por los evaluadores fueron similares a las del patrón de oro. Conclusión: la correcta aplicación del test, requiere varios entrenamientos, y aunque hubo pocas diferencias entre los puntajes, los errores cuando se está cerca del punto de corte propuesto, aumentan el riesgo de sesgo.

Introduction: The instruments for screening cognitive functions, applied to subjects in clinical settings and research, are useful for determining if this person has any trouble in cognition or show changes in the time. The usefulness of these instruments is defined with the evaluation of their psychometrics properties. Objective: This study allows to determine the intra and inter-observer agreement, when the MoCA test and MMSE were applied by a group in training process Materials and methods: The study group who attended two training sessions, with an interval of 5 months, scored the MoCA test and MMSE, from two patients which were filmed responding the tests, previous informed consent signature. We compared how close were the scores of participants among themselves by concordance correlation coefficient of Lin (rho) and with those given from the others by intra-class correlation coefficients (ICC). Results: In total, 46 participants were included. Intra-rater reliability was high for MoCA test (ICC = 0.86), but it was poor for MMSE (ICC=0.24). Inter-rater was poor for MoCA test (rho patient 1= 0.012, rho patient 2= 0.152) and MMSE (rho patient 1 = 0.008, rho patient 2 = 0.012). Although the scores between participants and gold standard were different, the diagnoses were similar. Conclusion:The correct scoring of the test, requires several trainings to clinical and research groups, and although they can be found few differences between scores applied by non-expert personnel, if the scores mistakenly given, are close to the cut-of point proposed for each test, the bias increases.

Clasificacion de lesiones meniscales de ISAKOS: estudio de reproducibilidad intra e interobservador / Intra and interobserver reliability of ISAKOS classification for meniscal tears

Introducción: El objetivo de este trabajo fue analizar la reproducibilidad intra e interobservador de la clasificación de lesiones meniscales de Sociedad Internacional de Artroscopía, Cirugía de la Rodilla y Medicina Deportiva (ISAKOS). Materiales y Métodos: Se utilizó la clasificación artroscópica de lesiones meniscales creada por la ISAKOS. Se seleccionaron y se analizaron 31 videos artroscópicos de cirugías realizadas en el Hospital Italiano de Buenos Aires. Los mismos fueron evaluados por 3 traumatólogos (2 especialistas en cirugía de rodilla y un becario de postgrado), en dos ocasiones con un intervalo de 30 días. Se utilizó el índice de Kappa de Cohen para evaluar la reproducibilidad intraobservador y el coeficiente de correlación intraclase para la reproducibilidad interobservador. Resultados: La reproductibilidad promedio intraobservador fue para el primero de 51%, para el segundo de 65% y para el tercero de 58%, alcanzando un acuerdo moderado según la categorización del coeficiente de Kappa utilizada por Landis y Koch. Con respecto a la reproductibilidad interobservador, se obtuvo una concordancia buena (ICC=0,71), según el Coeficiente de correlación intraclase. Todos los cálculos fueron estadisticamente significativos. (p<0,05). Conclusión: Si bien esta clasificación permite una detallada descripción de las lesiones meniscales, la reproductibilidad intraobservador no alcanzo los valores óptimos a pesar de haber obtenido en promedio un acuerdo moderado. Por otro lado, la reproductibilidad interobservador demostró en promedio resultados mayores al 70% (concordancia buena), con lo cual podemos afirmar que el acuerdo y reproductibilidad interobservador es aceptable. Tipo de trabajo: Observacional, descriptivo de tipo diagnóstico. Nivel de Evidencia: IV

Objectives: To analyze the intra and interobserver reliability of the International Society of Arthroscopy, Knee Surgery and Orthopaedic Sports Medicine (ISAKOS) classification for meniscal tears. Methods: The arthroscopic classification for meniscal lesions created by the ISAKOS was used. Thirty-one arthroscopic videos with different meniscal tear characteristics were analyzed by three orthopedic surgeons (two specialists in knee surgery and a fellow), twice at an interval of 30 days. The Kappa Coefficients (k) was used to assess the intraobserver reliability and intraclass correlation coefficient (ICC) for interobserver reliability. Results: The average intraobserver reliability was 51% for the first observer, 65% for the second and 58% for the third, reaching moderate agreement according to the Kappa coefficient used by Landis and Koch. Regarding interobserver reliability, good agreement (ICC = 0.71) was obtained for the intraclass correlation coefficient. The whole results were statistically significant (p <0.05). Conclusion: While this classification provides a detailed description of meniscal lesions, the intraobserver reliability did not reach the optimum values obtained despite having on average a moderate agreement. However interobserver reliability showed on average agreement of 70% (good agreement), which can affirm that the agreement and interobserver reliability is acceptable. Type of Study: Observational, descriptive, a diagnostic study. Level Of Evidence: IV

Validez y confiabilidad de una escala de clasificación de limpieza gástrica en endoscopia digestiva alta en población chilena / Validity and reliability of a gastric cleansing scale in upper endoscopyin chilean population

The presence of foam and bubbles during upper gastrointestinal endoscopy (UGE) obscures the view of gastric lesions. Objective: To assess the confidence of a gastric cleansing scale in UGE. Methods: Prospective, multicenter study. The instrument was administered to patients undergoing a UGE examination. For the gastric visualization scale, the stomach was divided in 4 parts and a 1-4 scale was used to classify each part, with a total score of 4 (optimal view of gastric mucosa) and 16 (poor view of gastric mucosa), assessed by 2 independent endoscopists. An initial cleansing score was obtained and later, after cleansing of each studied section, and total. Inter-observer concordance was established by means of Kappa test, and the agreement on the global cleansing score was established with the Bland-Altman plot. Results: 53 patients went under UGE, with an average age of 48,7 years and 62,3 percent female subjects. The main indication for performing the UGE examination was gastroesophageal reflux disease (GERD) (32.1 percent). Average duration of the procedure was 13.6 minutes. The average total gastrointestinal view before cleansing with water was 6.26 points (scale from 4 to 16) and 5.1 points (p < 0.001) after cleansing. 37.7 percent required at least 50 cc of water for cleansing. The difference in the pre and post cleansing score inter-observers was no different of 0. Kappa value obtained in gastric fundus, upper body, lower body and antrum before cleansing was 0.81; 0.71; 0.9 and 0.8, respectively. Kappa value obtained after cleansing of gastric fundus, upper body, lower body and antrum was 0.84; 0.65; 0.81 and 0.78; respectively. The mean difference between inter-observer scores before cleansing was 0.08 (p = 0.51), and after cleansing, 0.02 (p = 0.78)...

La presencia de espuma y burbujas durante la endoscopia digestiva alta (EDA) es una limitante para la visualización de lesiones gástricas. Objetivo: Evaluar la confiabilidad de una escala de clasificación de limpieza gástrica en EDA. Métodos: Estudio prospectivo, multicéntrico. Se aplicó el instrumento a pacientes que estaban agendados para EDA. Para la clasificación de visualización gástrica, el estómago se dividió en 4 porciones y se utilizó una escala de 1 a 4 por porción, sumando un puntaje total entre 4 (óptima visualización de la mucosa) y 16 (pobre visualización de ésta), evaluada por 2 endoscopistas independientes. Se obtuvo un puntaje de limpieza inicial y luego de la limpieza con agua de cada segmento estudiado y total. La concordancia inter-observador se estableció por medio del test de Kappa y el acuerdo para el puntaje global de limpieza fue establecido mediante el gráfico de Bland-Altman. Resultados: 53 pacientes fueron sometidos a EDA, con edad promedio de 48,7 años y 62,3 por ciento de sexo femenino. La principal indicación de EDA fue enfermedad por reflujo gastroesofágico (32,1 por ciento). El tiempo promedio del procedimiento fue 13,6 min. El promedio de visualización gástrica total previo a limpieza con agua fue de 6,26 puntos (escala 4 a 16) y post limpieza 5,1 puntos (p < 0,001). Para la limpieza el 37,7 por ciento requirió al menos 50 cc de agua. La diferencia de puntaje de visualización pre y post limpieza inter observador no fue distinta de 0. En fondo gástrico, cuerpo alto, cuerpo bajo y antro se obtuvo un valor de Kappa previo a limpieza de 0,81; 0,71; 0,9 y 0,8, respectivamente. El valor de Kappa posterior a limpieza en fondo gástrico, cuerpo alto, cuerpo bajo y antro fue 0,84; 0,65; 0,81 y 0,78, respectivamente. La diferencia media de los puntajes inter-observadores previos a la limpieza gástrica fue de 0,08 (p = 0,51) y posterior a la limpieza gástrica fue de 0,02 (p = 0,78)...

Concordancia interobservador en la evaluación de la escala de desarrollo infantil Bayley II / Matching interobserver assessment scale of child development Bayley II

Un elemento importante en la realización de proyectos de investigación en niños es disminuir el sesgo interobservador al realizar mediciones del desarrollo. Cuando se asegura la validez de un instrumento de evaluación, la magnitud del error se puede determinar a través de estudios de concordancia, que tienen como propósito estimar hasta qué punto dos observadores coinciden en su evaluación. La Escala de Desarrollo Infantil Bayley II (BSID-II) evalúa el desarrollo de los niños de 1 a 42 meses de edad, la prueba consta de tres subescalas diferenciadas: cognoscitiva, psicomotora y de comportamiento. El objetivo del presente estudio fue determinar la concordancia interobservador en la evaluación de la Escala de Desarrollo Infantil Bayley II en niños de 1 a 42 meses de edad. Se realizó un estudio descriptivo de corte transversal con 30 niños nacidos a término sin diagnóstico de enfermedad neurológica, genética o metabólica que acudieron a consulta externa al Laboratorio de Psicobiología durante el periodo comprendido de agosto de 2013 a mayo de 2014. Se documentó la historia clínica y se evaluó con la escala BSID-II a cada participante. Se evaluó la concordancia mediante el test de Kappa media de Cohen con el software Epi dat 4. La prevalencia de retraso global en el desarrollo de los niños fue de 67%, a partir de ello se observó concordancia tanto en las comparaciones del Índice de desarrollo mental k=0.9528, como en el Índice de desarrollo psicomotor k=.9023. El análisis demostró concordancia entre dos profesionistas, lo cual implica que de acuerdo a las categorías no hubo sesgo en el diagnóstico. Este dato es un indicador positivo respecto al nivel de coordinación y la coincidencia en el diagnóstico, además facilita la implementación de tratamientos adecuados para cada uno de los casos evaluados.

An important element when conducting research projects in children is decreasing interobserver bias when making measurements. When the validity of an instrument of evaluation is ensured, the magnitude of error can be determined through studies of concordance, whose purpose is to estimate how much two observers agree in their assessment. The Scale of Infant Development Bayley II evaluates the development of children 1-42 months of age. The test consists of three distinct subscales: cognitive, motor and behavioural. The aim of the present study was to determine interobserver agreement on the implementation of the Bayley Scale of Infant Development (BSID-II, 1993) in children 1-42 months of age. A descriptive cross-sectional study was conducted with 30 children born at term without a diagnosis of neurological, genetic or metabolic diseases that attended external consultation in the lab of Psychobiology during the period august 2013 to May 2014. A clinical history was documented, and the BSDI-II scale was applied, the agreement was assessed by Cohen´s Kappa test mean with Epi dat 4 software. The prevalence of developmental delay in children was 67% concordance was observed in the mental development index k = 0.9528 as well as in the psychomotor development index k = 0.9023. The analysis demonstrated concordance between the two professionals, which means that according to the categories no bias in occurred. This data is a positive indicator with respect to the level of coordination and the agreement in the diagnosis and also facilitates the implementation of an appropriate treatment for each of the cases evaluated.

Consultoria em patologia cirúrgica mamária: variabilidade interobservador no diagnóstico de lesões proliferativas intraductais atípicas / Consultation in breast surgical pathology: interobserver diagnostic variability of atypical intraductal proliferative lesions

OBJETIVO: Avaliar a concordância nos diagnósticos histopatológicos de lesões mamárias proliferativas intraductais entre patologistas gerais e especialistas em patologia mamária. MÉTODOS: Trata-se de estudo observacional e transversal, com análise de 209 lesões encaminhadas ao Laboratório de Patologia Mamária da Faculdade de Medicina da Universidade Federal de Minas Gerais para consultoria, no período de 2007 a 2011, comparando os diagnósticos originais com os após a revisão. Foram incluídos apenas os casos com solicitação formal de revisão e que apresentavam diagnóstico histopatológico no laudo original ou de revisão de lesões proliferativas, carcinoma ductal in situ puro, carcinoma ductal in situ com microinvasão ou associado a carcinoma invasor. A concordância percentual e o índice kappa foram utilizados para a análise estatística. RESULTADOS: Observamos moderada concordância nos diagnósticos originais de benignidade ou malignidade versus os diagnósticos de revisão (kappa=0,5; concordância percentual=83%). Após a revisão, o diagnóstico de malignidade foi confirmado em 140/163 casos (86%) e o diagnóstico de benignidade foi confirmado em 34/46 casos (74%). Quanto aos diagnósticos específicos, observamos concordância moderada entre o laudo original e de revisão (136/209 casos; kappa=0,5; concordância percentual=65%). A maior discordância foi observada nos casos de carcinoma ductal in situ com microinvasão (6/6 casos; 100%). Grande discordância foi observada nos casos de hiperplasia ductal atípica (16/30 casos; 53%) e carcinoma ductal in situ (25/75 casos; 33%). Em relação ao grau histológico do carcinoma ductal in situ, observou-se boa concordância entre os laudos originais e de revisão (29/39 casos; kappa=0,6; concordância percentual=74%). CONCLUSÃO: Nossos dados confirmam que as lesões mamárias proliferativas intraductais, em especial as hiperplasias ductais atípicas, o carcinoma ductal in situ e o carcinoma ductal in situ com microinvasão apresentam relevantes discordâncias nos diagnósticos histopatológicos, que podem induzir o clínico a erros nas decisões terapêuticas.

PURPOSE: To evaluate the agreement about the histopathological diagnosis of intraductal proliferative breast lesions between general pathologists and a specialist in breast pathology. METHODS: This was an observational, cross-sectional study of 209 lesions received in consultation at the Breast Pathology Laboratory of the School of Medicine, Federal University of Minas Gerais, from 2007 to 2011, comparing the original diagnosis and the review. We included only cases with a formal request for review and cases in which the original diagnosis or reviewer's diagnosis showed proliferative lesions, pure ductal carcinoma in situ, ductal carcinoma in situ associated with microinvasion or associated with invasive carcinoma. The kappa index and percent concordance were used in the statistical analyses. RESULTS: A moderate agreement was observed between the original histopathological diagnosis and the second opinion (kappa=0.5; percentual concordance=83%). After the review, the diagnosis of malignancy was confirmed in 140/163 cases (86%) and the diagnosis of benign lesions was confirmed in 34/46 cases (74%). Regarding specific diagnosis, we observed moderate agreement between the original diagnosis and the reviewer's diagnosis (136/209 cases; kappa=0.5; percent concordance=65%). The highest disagreement was observed in cases of ductal carcinoma in situ with microinvasion (6/6 cases; 100%). Important discordance was observed in cases of atypical ductal hyperplasia (16/30 cases; 53%) and ductal carcinoma in situ (25/75 cases; 33%). Regarding the histological grade of ductal carcinoma in situ, we observed good agreement between the original diagnosis and the review (29/39 cases; kappa=0.6, percent agreement=74%). CONCLUSION: Our data confirm that intraductal proliferative breast lesions, especially atypical ductal hyperplasia, ductal carcinoma in situ and ductal carcinoma in situ with microinvasion show relevant discrepancies in the histopathological diagnoses, which may induce errors in therapeutic decisions.

Variabilidad en la medición del índice acetabular / Variability in measurement of acetabular index

Introducción: La Displasia del desarrollo de la cadera (DDC) es un espectro de enfermedades que abarca desde la luxación franca de la cadera hasta la displasia acetabular leve. El screening de detección de DDC se realiza de rutina en nuestro país, mediante una radiografía de pelvis a los 3 meses. El índice acetabular medido en estas radiografías se utiliza para evaluar la cadera displásica, tanto en la presentación inicial como durante el seguimiento posterior. Objetivo: Evaluar la variabilidad tanto intra como inter observador en la medición del índice acetabular, entre profesionales médicos. Material y Métodos: Cuatro evaluadores (un cirujano-ortopédico infantil, un médico general, un pediatra y un radiólogo) realizaron la medición del índice acetabular en 100 radiografías de screening (200 caderas), en tres ocasiones, separadas por un mes cada una (600 mediciones totales). Un observador independiente evaluó la reproductibilidad en la medición. Se utilizó el coeficiente de correlación intraclase para determinar diferencias significativas. Resultados: La variabilidad intra observador fue menor que la interobservador. La variabilidad intra observador fue similar para los diferentes evaluadores, +/- 1,5°. La variabilidad inter observador fue de +/- 3,4°. Conclusiones: Demostramos una alta concordancia entre las mediciones, determinando una alta reproductibilidad del índice acetabular. El índice acetabular es un método seguro para el diagnóstico y seguimiento de displasia acetabular.

Developmental dysplasia of the hip (DDH) is a spectrum of diseases ranging from frank dislocation of the hip to mild acetabular dysplasia. DDH screening for detection is performed routinely in our country using pelvic x-ray at 3 months of age. The radiographic measured acetabular index is used to evaluate the dysplastic hip, at initial presentation and during follow-up. Objective: Evaluation of the intra- and inter-observer variability, among medical professionals, when measuring acetabular index. Methods: Four reviewers (a children orthopedic surgeon, a general practitioner, a pediatrician and a radiologist) performed acetabular index measurement in 100 radiographs (200 hips), on three occasions, separated each by one month (600 total measurements). An independent observer evaluated the measurement reproducibility. The intra-class correlation coefficient to determine significant differences was used. Results: The intra-observer variability was less than the inter-observer variability. The intra-observer variability was similar among the different assessors, +/- 1.5 degrees. The inter-observer variability was +/- 3.4 degrees. Conclusions: A high concordance among measurements was reported, evidencing a high reproducibility of the acetabular index; this index is a reliable method for the diagnosis and follow-up of acetabular dysplasia.

Confiabilidade interobservador da classificação internacional de atenção primária em uma unidade de atenção básica à saúde / Interobserver reliability of the international classification of primary care at a primary health care unit

Avaliou-se a confiabilidade interobservador da Classificação Internacional de Atenção Primária na codificação de queixas relatadas em unidade básica de saúde pública, por meio de uma amostra de 300 atendimentos. Os motivos de consulta foram registrados por médicos do serviço, e sua codificação realizada por duas pesquisadoras. A concordância entre as classificadoras em relação ao número de motivos codificados foi calculada por meio do kappa ponderado; para as demais análises (capítulos e códigos completos), foi utilizado o coeficiente kappa simples. Foram codificados 634 motivos pela primeira classificadora e 699 pela segunda. A concordância simples do número de motivos foi moderada, com kappa ponderado de 0,71 (Intervalo de 95% de Confiança [IC95%]: 0,68-0,73). Em relação aos códigos de capítulos e códigos completos, foram encontradas confiabilidade substancial (kappa = 0,89; IC95%: 0,87-0,91) e moderada (kappa = 0,72; IC95%: 0,68-0,76), respectivamente. Os resultados indicam bom desempenho da classificação para codificar motivos de atendimento na atenção básica, mesmo a partir de registros médicos.

We evaluated the International Classification of Primary Care interobserver reliability for coding the complaints reported at a primary public health unit. The study sample consisted of 300 appointments. Reasons for appointment were registered by physicians on the medical record and coding was performed by two investigators. Reliability among the classifiers as to the number of coded reasons was calculated by weighted kappa. Crude kappa coefficients were used for the remaining analyses (chapter codes and full codes). A total of 634 reasons were coded by the first classifier and 699 by the second one. Crude reliability of numbers of reasons was moderate, with a 0.71 weighted kappa (95% Confidence Interval [95%CI]: 0.68-0.73). Regarding chapter codes and full codes, reliability was substantial (kappa = 0.89; 95%CI: 0.87-0.91) and moderate (kappa = 0.72; 95% CI: 0.68-0.76), respectively. Our results suggest a good performance of the Classification for coding reasons for visit in primary care, even when data are obtained from physician consultation notes.

Estandarización en la observación y clasificación de lesiones epiteliales premalignas y malignas / Standardization in the observation and classification of premalignant and malignant epithelial lesions

Los criterios histológicos para determinar el grado de displasia, la clasificación de Broders y el frente de invasión tumoral (FIT) son parámetros subjetivos no cuantificables que pueden indicar el grado de evolución de displasias y carcinomas. Un factor importante a considerar durante la valoración histológica, es la variabilidad del diagnóstico entre patólogos. El objetivo es estandarizar los criterios y determinar la variabilidad intra e inter observador en el diagnóstico de displasias y COCE. Se seleccionaron y estandarizaron los criterios morfológicos para el diagnóstico y se revisaron los casos seleccionados aleatoriamente por tres patólogos bucales (30 displasias y 30 carcinomas) del Laboratorio de Patología Clínica y Experimental de la DEPeI de la FO, UNAM. Cada patólogo analizó y registró los parámetros establecidos para displasia, COCE y FIT en 2 ocasiones. Se aplicó el test Kappa para valorar la concordancia intra e inter observador. El Observador 1 v/s el 2 obtuvo una concordancia para COCE de 0,75 y en displasias de 0,60 e intraobservador de 0,90. El observador 2 v/s el 3 presentó una concordancia para COCE de 0,75 y en displasias de 0,59 e intraobservador de 0,91. El Observador 3 Vs el 1 tuvo una concordancia para COCE de 0,77, y en displasias de 0,59 e intraobservador de 0,92. La concordancia intraobservador e interobservador en COCE fue de buena a excelente, pero en displasias fue aceptable confirmando que su evaluación presenta mayor grado de dificultad. Con una adecuada estandarización se puede obtener una buena concordancia entre patólogos.

In the histological criteria for determining the degree of dysplasia, the Broders classification and the front of tumor invasion (FTI) are unquantifiable subjective parameters that may indicate the degree of development of carcinomas. An important factor to consider during the histological evaluation is the variability in the diagnosis of pathologists. The objective to standardize criteria and determine the intra and inter-observer variability in the diagnosis of dysplasias and OSCC. We selected and standardized morphological criteria for the diagnosis, and the cases were reviewed randomly by three oral pathologists (30 dysplasias and 30 carcinomas) from the Laboratory of Clinical and Experimental Pathology of the FO DEPeI, UNAM. Each pathologist analyzed and recorded the parameters for dysplasia and OSCC FIT on two occasions. Kappa test was applied to assess intra and inter-observer agreement. Observer 1 v/s 2 match for OSCC was 0.75, 0.60 for dysplasias and intra observer 0.90. Observer 2 v/s 3 presented a concordance of 0.75 for OSCC, 0.59 for dysplasias and intra-observer 0.91. Observer 3 v/s observer 1 for OSCC was 0.77, 0.59 for dysplasias and intra-observer 0.92. Intra observer and inter-observer concordance in OSCC were good or excellent, but in dysplasia was acceptable, confirming that its assessment showed the greatest difficulty with proper standardization we can obtain a better consensus between pathologists.

Qué podemos aprender de la revisión de los trabajos libres enviados al XLI congreso venezolano de cardiología? / What can we learn from the rewiew of the abstracts submitted to the XLI venezuelan congress of cardiology?

Se estudió el proceso de revisión de 118 resúmenes de trabajos recibidos para el XLI Congreso Venezolano de Cardiología. Fueron evaluados independientemente por tres pares de revisores, quienes desconocían los autores y la institución de origen, usando 15 criterios ("ítem"). Expresaron su opinión sobre la aplicabilidad de cada ítem mediante una escala de Likert: totalmente en desacuerdo (TD), en desacuerdo (D), de acuerdo (A) y totalmente de acuerdo (TA). Fueron cuantificadas de 1 a 4 respectivamente, generando un puntaje por criterio, el cual fue multiplicado por un factor de proporcionalidad que asignó pesos diferentes a cada ítem. La suma de los puntajes de ítem (PIs) produjo un puntaje total (PTN) que fue normalizado como % del puntaje máximo posible. Se estudió la variabilidad entre los revisores mediante análisis de correlación / regresión (C / R) y cálculo de índice Kappa. PTN promedio (236 evaluaciones) fue 63,71 + 17% (D. S.) (mínimo 25% y máximo 92,3%). Un 20% con puntajes < 50%, y 11% obtuvieron PTN > 80%. Los resúmenes fueron clasificados en grupos I a IV mediante el promedio de los PTN asignados por los dos revisores. C / R mostró R = 0,35 y R2 = 0,12, m = 0,44 y b = 37% para todos los pares. El análisis por pares mostró valores más satisfactorios para algunos (par 2 y 3) que para otros (par 5 y 6) y 0,15 (par 1 - 4). Los resultados sugieren que el proceso de revisión de los ítem y consensuado su interpretación por los revisores.

A study was carried out of the review process applied to 118 abstracts received by the XLI Venezuelan Congress of Cardiology. Abstracts were assessed independently by pairs of reviewers, blinded as to authors and institutions of origin, using 15 criteria ("items"). Reviews expressed their option about the applicability of each item by means of a Likert scale: Total Disagreement (TD), Disagreement (D), Agreement (A) and Total Agreement (TA). Responses were graded to 1-4, generating a criterion score, which was multiplied by a Proportionality Factor (PF) to assign a weight to each criterion. The sum of item Scores generated a Total Score (NTS) which was normalized as percentage of the maximum possible score. Variability among reviewers was assessed by a correlation/regression analysis (C/R) and by calculating the Kappa index. Mean NTS for all 118 abstracts (236 assessments) was 63.71 + 17% (SD) (min. 25% and max. 92.3%). For 20% of abstracts the NTS < 50% whereas only 11% obtained a NTS > 80%. Abstracts were classified into Groups I to IV on the basis of the mean NTS assigned by two reviewers. C / R yielded R = 0.35 and R2 = 0.12, m = 0.44 and b = 37% for all pairs. Reviews pairs assigned more satisfactory results for some (Pairs 2 - 3) That for others (Pair 5 - 6). The mean Kappa for all pairs was 0.13, ranging from 0.008 (pair 5 - 6) to 0.15 (pair 1 - 4). Our results suggest that the reviews process can be improved by modifying the text of items and by building consensus on its interpretation by reviewers.

Concordância interobservador na interpretação imuno-histoquímica da superexpressão do Her2 detectada por cinco diferentes anticorpos em array de carcinomas mamários / Interobserver agreement in scoring immunohistochemical overexpression of Her2 detected by five different antibodies on tissue microarrays of breast carcinomas

OBJETIVO: Estudar a concordância interobservador na interpretação da superexpressão imuno-histoquímica para a proteína Her2 empregando diferentes anticorpos em array de carcinomas mamários. MATERIAL E MÉTODO: Foi construído um array contendo dois cilindros (2 mm de diâmetro cada) de 25 carcinomas mamários. Cortes histológicos seriados do array foram submetidos à imuno-histoquímica utilizando-se cinco anticorpos anti-Her2: SP3 (NeoMarkers), HercepTest e A0485 (Dako), CB11 (Novocastra) e 4D5 (Genentech). Uma lâmina corada por cada anticorpo (total = cinco lâminas) foi submetida à avaliação individual por cinco observadores seguindo-se o sistema de escore proposto no HercepTestTM. Para a avaliação interobservador os resultados foram interpretados em três diferentes análises: I (0; 1+; 2+; 3+); II (0 e 1+; 2+ e 3+) e III (0 e 1+; 2+; 3+) e aplicado o teste estatístico de kappa. RESULTADOS: A concordância interobservador foi boa quando os casos foram avaliados em quatro categorias (0; 1+; 2+; 3+). Quando avaliados em duas categorias (0 e 1+; 2+ e 3+), a concordância interobservador foi boa para os casos corados por SP3 e CB11 e muito boa para os corados por A0485, HercepTest e 4D5. Na análise III (0 e 1+; 2+; 3+), a concordância interobservador foi considerada moderada para os casos corados por CB11 e boa para os corados pelos outros anticorpos. CONCLUSÃO: A concordância interobservador foi considerada entre moderada e muito boa na avaliação dos cinco anticorpos. A menor concordância interobservador ocorreu nos casos com marcações fraca (1+) e moderada (2+). A experiência dos observadores influenciou as taxas de concordância.

AIM: To examine interobserver agreement in immunohistochemical evaluation of Her2 overexpression using five different antibodies on breast cancer array. MATERIAL AND METHOD: Material and method: One array was built with two cores (2 mm diameter each) from 25 breast carcinomas. Serial sections from the array were submitted to immunohistochemistry using five anti-Her2 antibodies: SP3 (NeoMarkers), HercepTest and A0485 (Dako), CB11 (Novocastra), and 4D5 (Genentech). One slide immunostained for each antibody (total = five slides) were independently scored by five observers following HercepTestTM scoring system. Interobserver agreement was evaluated in three different analysis: I (0; 1+; 2+; 3+); II (0 and 1+; 2+ and 3+) and III (0 and 1+; 2+; 3+), and the kappa statistics was applied. RESULTS: There was a good rate of interobserver agreement when the four scores were considered (0; 1+; 2+; 3+). When the scores were considered in two categories (0 and 1+; 2+ and 3+) the interobserver agreement rate was considered substantial for cases stained for SP3 and CB11, and almost perfect for cases stained for A0485, HercepTest and 4D5. For analysis III (0 and 1+; 2+; 3+), a moderate rate of interobserver agreement was considered for cases stained for CB11, and a substantial rate for other antibodies. CONCLUSION: The overall interobserver agreement was considered moderate to substantial in the evaluation of cases stained for the five antibodies. The lowest rate of agreement was obtained in the evaluation of the cases scored as weak (1+) and moderate (2+). The observers experience altered the concordance rates.

Interpretação e uso clínico da pesquisa de dismorfismo eritrocitário no sedimento urinário / Clinical utility and interpretation of screening for urinary erythrocyte dysmorphism

Introdução: O dismorfismo eritrocitário urinário foi descrito há vários anos e tem sidousado para identificar os sangramentos glomerulares e para orientar a investigação subseqüente.Este estudo avalia a variabilidade na análise do dismorfismo eritrocitário por diferentesobservadores, verificando a correlação entre as observações e sua associação com o diagnósticoetiológico das hematúrias.Métodos: Foram selecionadas 18 amostras de sedimento urinário de pacientes comhematúria glomerular e não-glomerular, cujas imagens foram capturadas por um programa deanálise de imagens e gravadas em meio magnético. Essas imagens foram analisadas por dozeobservadores treinados na análise de dismorfismo eritrocitário que atuam em laboratórios deanálises clínicas de Porto Alegre. Os observadores, cegos em relação ao diagnóstico etiológicoda hematúria, classificaram as amostras pela presença ou ausência de dismorfismo e estimarama porcentagem de hemácias dismórficas em relação ao seu número total.Resultados: Utilizando o ponto de corte de 75% de hemácias dismórficas como diagnósticode hematúria glomerular, o diagnóstico correto foi obtido em 79% das observações. Asensibilidade foi de 76%, e a especificidade de 82%, com valores preditivos positivo e negativode 80% e 78% respectivamente. A correlação entre as observações foi calculada com o uso decoeficiente kappa, observando-se uma concordância moderada (kappa = 0,58).Conclusões: Este estudo demonstrou que, a despeito da ausência de critérios rígidos deavaliação e classificação do dismorfismo, sua realização por profissionais capacitados apresentaum nível aceitável de acurácia e concordância, justificando seu uso na avaliação de pacientescom hematúria.

Introduction: Urinary erythrocyte dysmorphism was described long ago and has beenused to identify glomerular bleeding and to guide subsequent investigation. The aim of this studywas to analyze the variability of erythrocyte dysmorphism observation performed by severalobservers, evaluating the correlation between the observations and their association with etiologicdiagnosis of hematuria.Methods: Eighteen urinary sediment samples from patients with glomerular and nonglomerularhematuria were studied. Their images were captured by phase-contrast microscopyand saved for later analysis. These images were analyzed by 12 observers experienced in erythrocyte dysmorphism evaluation who work in clinical laboratories in Porto Alegre, Brazil. Theobservers, who were blinded to the etiologic diagnosis of hematuria, classified the samplesaccording to the presence or absence of erythrocyte dysmorphism and estimated the percentageof dysmorphic erythrocytes in relation to total number.Results: Correct diagnoses were obtained in 79% of the observations, considering 75%as the cut-off point of dysmorphic erythrocytes for the diagnosis of glomerular hematuria.Sensitivity and specificity were 76 and 82%, respectively; positive predictive value was 80% andnegative predictive value was 78%. Agreement among observers was calculated using the kappacoefficient, which showed a moderate agreement (kappa = 0.58).Conclusions: Our study demonstrated that, despite the absence of strict criteria forassessing and classifying dysmorphism, the performance of urinary erythrocyte dysmorphismtest by skilled professionals presents an acceptable level of accuracy and agreement, whichsupports its use in the evaluation of patients with hematuria.