Validación de Actividades Profesionales Confiables (APROC) para la Certificación de Ginecología y Obstetricia / Validation of Entustable Professional Activities (EPAs) for Gynecology and Obstetrics Certification

Resumen Como parte del diseño de un instrumento para la evaluación de la certificación ante el Consejo Mexicano de Ginecología y Obstetricia en México se llevó a cabo el proceso de validación del constructo a evaluar. De acuerdo con la bibliografía consultada, la educación médica se basa en competencias, por lo que es coherente practicar una evaluación en el mismo tenor. Se decidió utilizar el concepto de Actividades Profesionales Confiables (APROC) porque son un puente entre la competencia y la actividad observable que puede llevar a cabo el sustentante. Se aplicó una metodología de cuatro fases que se inicia con una revisión bibliográfica con la que se definió una lista de APROC para validarla en el contexto mexicano. La fase dos consistió en aplicar la técnica de grupos focales que representarán las regiones médicas definidas por la FEMECOG, después de recabar y analizar la información de los grupos en la fase tres. La última fase consistió en una validación por parte de 10 expertos en Ginecología y Obstetricia para conseguir un nivel de acuerdo mayor al 80% en cada APROC. Como resultados de este proceso de validación de constructo a evaluar se obtuvo una lista de 15 APROC con alcances (definición de las delimitaciones de las APROC, dónde inician y dónde terminan) con un nivel de aceptación superior al 80%. Además, se corroboró la eficacia de la metodología cualitativa para realizar validaciones en donde las partes interesadas que podrían participar para definir áreas o temas no cuenten con disponibilidad debido a sus actividades laborales.

Abstract As part of the design of an instrument to evaluate the certification of the Mexican Council of Gynaecology and Obstetrics in Mexico, the validation process of the construct to be evaluated was carried out. According to the literature consulted, medical education is based on competencies, so it is coherent to carry out an evaluation in the same vein. It was decided to use Entrustable Professional Activities (EPA), as they provide a link between the competence and the observable activity that the supporter can perform. A four-phase methodology was carried out, starting with a bibliographic review that defined a list of EPAs in order to validate them for the Mexican context. The second phase consisted of using the technique of focus groups, representing the medical regions defined by FEMECOG in the country, once the information from the groups had been collected and analysed in the third phase, and the final phase consisted of validation by 10 experts in gynaecology and obstetrics, in order to achieve a level of agreement of more than 80% in each EPA. As a result of this validation process of the construct to be evaluated, a list of 15 EPAs with scopes (definition of the boundaries of the EPAs, where they start and how far they end) was obtained with a level of acceptance greater than 80%, in addition to confirming the effectiveness of the qualitative methodology to carry out validations when the interested parties who could participate in defining areas or topics are not available due to their work activities.

Validación de dominios y competencias por grupos focales y juicio de expertos / Validation of domains and competencies by focus groups and expert judgment

Resumen El Consejo Mexicano de Ginecología y Obstetricia certifica a los especialistas para ejercer su especialidad y brindar una atención de alta calidad a las pacientes. En la actualidad, el Consejo está rediseñando el examen de Certificación en Ginecología y Obstetricia orientado a la evaluación de competencias profesionales a partir de las actividades profesionales confiables que permitan identificar los dominios de la competencia médica en un especialista. La competencia es una variedad de habilidades ejercidas a través de múltiples dominios o aspectos del desempeño profesional; sus descriptores requieren que contengan habilidades relevantes, contexto y la etapa o nivel de evaluación. Por su parte, los dominios son un conjunto de competencias clave. Este informe incluye los resultados de la primera validación en México de dominios y competencias para la evaluación de los ginecoobstetras a partir de una metodología cualitativa que comprende una revisión de la bibliografía, grupos focales, análisis de trabajos colegiados y validación por juicio de expertos. Los resultados se presentan divididos por los ocho dominios en los que se trabajó, se mencionan los comentarios más relevantes a discutir por los cuatro grupos focales. Éstos y la validación por expertos permitió reunir comentarios valiosos, coherentes y funcionales para el sistema de evaluación que quiere llevar a cabo el Consejo. Este ejercicio permitirá el posterior desarrollo de la tabla de especificaciones, reactivos o nuevos instrumentos de evaluación coherentes con un sistema de dominios, competencias y actividades profesionales confiables.

Abstract The Mexican Council of Gynecology and Obstetrics certifies specialists to practice their specialty and provide high-quality healthcare to patients. Currently, the Council is redesigning the Gynecology and Obstetrics Certification exam, oriented to the evaluation of professional competencies based on reliable professional activities that allow the identification of domains of a specialist's medical competencies. Competency can be defined as a variety of skills across multiple domains or aspects of professional performance. Its descriptors require to contain relevant skills, context, and the stage or level of assessment. Domains can be described as a set of competencies that are considered essential. This report includes the results of the first validation done in Mexico. The validation of domains and competencies for the evaluation of physicians in the area of Obstetrics and Gynecology is based on a qualitative methodology that includes a literature review, focus groups, analysis of collegiate works, and validation through expert judgment. The obtained results are divided into eight domains that mention the most relevant observations that were discussed by the four focus groups. The focus groups and the validation through expert judgment made it possible to gather valuable, coherent, and functional feedback for the evaluation system that the Council wants to carry out. This method will allow the subsequent development of the table of specifications, items, or new evaluation instruments congruent with a system of domains, competencies, and reliable professional activities.