Teste de Progresso para estudantes de Medicina: experiência de um consórcio na Região Nordeste do Brasil / Progress Test for medical students: experience of a consortium in Northeastern Brazil

RESUMO

Resumo Introdução: A colaboração entre escolas médicas para a realização do Teste de Progresso (TP) vem sendo ampliada com o propósito de tornar-se um modelo de prática educacional. Relato de experiência O núcleo de escolas médicas CIN1 foi instituído no ano de 2013, tendo na sua organização um coordenador-geral e coordenadores de cada escola participante. Realiza dois testes ao ano, variando o número de escolas participantes. O teste possui 120 questões distribuídas nas seis áreas (ciências básicas aplicada, saúde coletiva, pediatria, clínica médica, cirurgia/urgência e emergência, e ginecologia e obstetrícia) e tem seu blueprint baseado em matriz previamente validada. O teste é aplicado a todos os estudantes das escolas participantes, no mesmo dia e com duração de quatro horas. Aconteceu on-line em 2020 e 2021, por causa da pandemia da Covid-19. A pontuação total do estudante é calculada pelo número de questões corretas, sem a opção "não sei", nem penalidades para incorretas. A análise é realizada por meio da teoria clássica do item. Os estudantes recebem a análise do desempenho comparativamente com a média obtida pelos discentes no mesmo ano e a progressão em relação ao teste anterior. As escolas recebem o desempenho dos respectivos estudantes, a análise da dificuldade e discriminação geral dos itens, e uma avaliação global do teste. Discussão A implantação do CIN1 representou um grande avanço para as escolas envolvidas. A colaboração não se deu apenas sobre o teste, mas também para o desenvolvimento docente de forma conjunta. Impedimentos de regimento interno e custos podem justificar a variação na participação das escolas. Conclusão: A organização de um núcleo de escolas para o TP traz benefícios e muitos desafios. O aperfeiçoamento dos critérios de análises e feedback e a inclusão de estudantes na avaliação de questões são etapas a serem discutidas e implantadas. A utilização do ambiente virtual, de mais baixo custo, pode ser um facilitador para ampliar a participação das escolas.

ABSTRACT

Abstract Introduction: Collaboration between medical schools to hold the PT has expanded, constituting a model of educational practice. Experience report The CIN 1 group of medical schools was established in 2013, organized with a general coordinator and coordinators from each participating school. It holds two tests a year, with a varying number of participant schools. The test has 120 questions distributed in 6 areas (Applied Basic Sciences, Public Health, Pediatrics, Internal Medicine, Surgery/Urgent and Emergency, Gynecology and Obstetrics) and its blueprint is based on a previously validated Matrix. The 4-hour test is applied to all students from participating schools, on the same day and at the same time. It was administered online in 2020 and 2021 due to the COVID-19 pandemic. The student's total score is calculated by the number of correct questions, excluding the "don't know" option, or penalties for incorrect ones, and is analyzed by classical item theory. Students receive performance analysis compared to the average attained by students in the same year, and the progression in relation to the previous test. The schools receive the performance of the respective students and analysis of the difficulty and general breakdown of the items and an overall evaluation of the test. Discussion: The implementation of CIN 1 represented a great advance for the schools involved. The collaboration was not only about the test, but also for the teacher development in a joint way. Bylaw impediments and costs may justify the variation in school participation. Conclusion: The organization of a group of schools for the TP brings benefits and many challenges. Improving analysis and feedback criteria and including students in the assessment of questions are steps to be discussed and implemented. The use of the lower cost virtual environment may facilitate increased participation of schools.