Cursos de graduação em medicina: uma análise a partir do sinaes / Undergraduate medical courses in Brazil: an analysis based on the sinaes system

RESUMO

Estudo descritivo analítico dos indicadores do Sistema Nacional de Avaliação da Educação Superior-Sinaes/Inep/MEC. Existem evidências de problemas metodológicos nos instrumentos do Exame Nacional de Desempenho dos Estudantes (Enade). Houve variação das matrizes de referência em 2004 e 2007, mudanças nas fórmulas e multicolinearidade no cálculo do Conceito Preliminar e do nível de dificuldade das provas, respectivamente 65 por cento em 2004 e 35 por cento em 2007. Nos dois períodos, quase metade das questões avaliou a capacidade de memorização (47 por cento e 42 por cento). A análise Cart apontou condição sociocultural, rede pública de ensino e percepção de alta oferta de formação complementar pela instituição como fatores associados ao melhor desempenho do concluinte. Tanto a nota no componente específico do concluinte como a diferença entre a nota de formação geral do concluinte e do ingressante são indicadores de forte discriminação de desempenho. Propõe-se um indicador multicritério dessas duas quantidades, que foi capaz de discriminar as instituições bem conceituadas da área médica. Matrizes de referência compatíveis e robustas são necessárias para o monitoramento de cursos que formem profissionais de excelência e que estejam conscientes de suas responsabilidades sociais.

ABSTRACT

This descriptive study of the indicators from the National System for the Evaluation of Higher Education-Sinaes/Inep/MEC. There is evidence of methodological problems in the construction of the instruments for the National Examination of Students' Performance (Enade). There was a variation in the reference matrices in 2004 and 2007, changes in the formulas, and multi-colinearity in calculation of the Preliminary Classification. In 2004, 65 percent of the questions were classified as "difficult", as compared to only 35 percent in 2007..Nearly half of the questions evaluated the capacity for memorization (47 percent and 42 percent). Cart analysis pointed to the following factors associated with better performance on the graduating student's higher socioeconomic status, public institution, and high supply of complementary training by the institution. Both the graduating student's specific component grade and the difference between them and first-year student's overall classification appear as robust performance indicators. This study proposes a multiple-criteria indicator which proved capable of discriminating between highly rated institutions in the medical field. Consistent and robust reference matrices are necessary for monitoring courses that train excellent professionals who are aware of their social responsibilities.