Development and evaluation of the General Surgery Objective Structured Assessment of Technical Skill (GOSATS).

RESUMEN

ANTECEDENTES: La adquisición de habilidades técnicas es importante en el entrenamiento especializado en cirugía. A pesar del énfasis en la capacitación basada en competencias, actualmente hay pocas herramientas disponibles para la evaluación directa de habilidades técnicas al finalizar el periodo de formación. El objetivo de este estudio fue desarrollar y validar un examen simulado de habilidades técnicas para postgraduados en formación en cirugía general (5º año postgraduado). MÉTODOS: Se desarrolló un examen simulado de habilidades técnicas de procedimientos de ocho estaciones. Cirujanos generales certificados y ciegos respecto al nivel de formación puntuaron la actuación de 10 postgraduados de tercer año (PGY3) y 9 postgraduados de quinto año (PGY5) usando una puntuación validada. Se utilizó el coeficiente alfa de Cochrane para calcular los índices de fiabilidad, y un modelo conjuntivo para establecer la nota de paso del examen mediante un método de regresión borderline. La fiabilidad de la decisión pasar/no pasar el examen se evaluó usando la metodología Subkoviak. La relación entre pasar el examen y el nivel PGY se analizó mediante la prueba de ji al cuadrado. RESULTADOS: La fiabilidad entre estaciones fue de 0,66 y la fiabilidad entre evaluadores de 0,92, 0,97 y 0,76. Se estableció una puntuación para pasar el examen de 176,8/280 (63,1%). La tasa de paso del examen para postgraduados PGY5 fue del 78% (7/9) en comparación con el 30% (3/10) para los posgraduados PGY3. La fiabilidad de la decisión pasar/no pasar fue pₒ= 0,88. Los postgraduados PGY5 presentaban una probabilidad significativamente superior de pasar el examen en comparación con los postgraduados PGY3 (χ2 = 4,34, P = 0,037). CONCLUSIÓN: Se desarrolló un examen sumatorio de habilidades técnicas de cirugía general con índices de fiabilidad dentro del rango necesario para este tipo de valoraciones. Se requiere una evaluación adicional antes de que el examen se pueda utilizar en las decisiones de certificación.