Fiabilidad de un examen clínico objetivo estructurado para predecir la futura competencia profesional de estudiantes de medicina / Reliability of an objective structured clinical examination to assess the future professional competence of medical students

RESUMEN

Introducción: Cuando con los resultados de un examen clínico objetivo estructurado (ECOE) se decide sobre la futura competencia profesional de estudiantes de medicina, la fiabilidad de dicha prueba debe adecuarse a esta finalidad. Objetivo: Calcular la fiabilidad (alfa de Cronbach) de una serie de ECOE y su relación con la duración, número de participantes, estaciones, ítems y evaluadores. Sujetos y métodos: Se analizan 14 ECOE realizados a 2.995 estudiantes de cuarto y quinto curso de la Facultad de Medicina de Granada desde 2004 a 2013. Resultados: La fiabilidad fue ≥ 0,70 en el 92,84% de los ECOE. También fue significativamente ≥ 0,70 cuando la duración total fue ≥ 60 minutos (p = 0,042), el número de estaciones ≥ 10 (p = 0019), el número de ítems ≥ 50 (p = 0,018) y el número de evaluadores ≥ 6 (p = 0,018). No se observaron diferencias con el número de estudiantes ni con las opciones al ítem utilizadas. Conclusiones: Los ECOE cuyos resultados se utilicen para aprobar asignaturas de la carrera de medicina deben tener una fiabilidad ≥ 0,70. Para alcanzar dicha fiabilidad o mayor, el formato debe constar de al menos 10 estaciones, durar ≥ 60 minutos, tener ≥ 50 ítems y ≥ 6 evaluadores

ABSTRACT

Introduction: When the future professional competence of medical students is decided based on results of an objective structured clinical examination (OSCE), the reliability of this test should be adequate to this purpose. Aim: To calculate the reliability (Cronbach's alpha) of each one of OSCEs we performed and its relationship with the duration, number of participants, stations, items and evaluators. Subjects and methods: Fourteen OSCE tests performed to 2995 medical students of 4th and 5th year of the Faculty of Medicine of Granada between 2004 to 2013 were analyzed. Results: The reliability was ≥ 0.70 in 92.84% of the OSCEs. It was also significant ≥ 0.70 with a total duration ≥ 60 minutes (p = 0.042), and a number of stations ≥ 10 (p = 0.019), a number of items ≥ 50 (p = 0.018) and a number of evaluators ≥ 6 (p = 0.018). No differences with the number of students, neither with the options to the item were observed. Conclusions: The OSCEs carried out in centers which results are used to approve subjects of the medical career, must have a reliability ≥ 0.70. To achieve this reliability or greater, the format should consist of at least 10 stations, a duration ≥ 60 minutes, and having ≥ 50 items and ≥ 6 evaluators