Comparação entre testes escritos e testes realizados no computador: estresse, satisfação e desempenho dos alunos do Curso de Medicina da Unifenas ­ Alfenas, cursando Ginecologia e Obstetrícia / Comparison between written tests and computer tests: stress, satisfaction and performance among medical students attending Gynecology and Obstetrics Course at UNIFENAS - Alfenas/MG

Introdução: As avaliações usando tecnologia estão presentes nas escolas em vários países, e seu uso se popularizou nas últimas duas décadas, sendo utilizadas no exame para licença médica nos Estados Unidos desde 1999. O potencial que as avaliações aprimoradas por tecnologia trazem para o mundo acadêmico foi o que motivou a realização deste estudo, e o conhecimento advindo de uma conferência específica sobre essas tecnologias trouxe o incentivo para persistir nessa linha de pesquisa. Método: Este estudo tem por objetivo comparar o estresse, a satisfação e o desempenho dos acadêmicos durante o primeiro semestre de 2018, ao realizarem provas escritas convencionais e provas no computador na disciplina de Ginecologia e Obstetrícia do curso de Medicina da Universidade José do Rosário Vellano, campus Alfenas. Foram avaliadas as turmas do décimo segundo período e sétimo período, totalizando uma amostra de 135 alunos. Tratou-se de um estudo experimental randomizado em que os alunos foram divididos em dois grupos para as avaliações e foram-lhes aplicados questionários pré-definidos e presenciais. Antes da prova, foram entregues aos alunos perguntas específicas para avaliar o estresse envolvido em sua realização. Ao término da prova, foram aplicadas as questões que avaliaram a satisfação com o tipo de prova realizada. Foram ainda registradas as notas obtidas nos dois tipos de avaliação. Cada aluno fez uma avaliação escrita convencional e uma avaliação via computador. Resultados: Os acadêmicos avaliados demonstraram maior estresse e menor satisfação com a prova no computador, comparando-a com a prova escrita convencional. O tipo de prova não esteve associado ao desempenho acadêmico. Conclusão: A falta de familiaridade e treinamento com a metodologia, antes da aplicação das avaliações, causou aumento no estresse nos acadêmicos envolvidos no presente estudo, o que interferiu na satisfação, ao fazer a prova usando tecnologia, embora não tenha havido diferença nos escores de desempenho. As informações coletadas serão utilizadas para reestruturação do formato dos testes oferecidos no departamento de Ginecologia e Obstetrícia da UNIFENAS, campus Alfenas, com o intuito de aprimorar a avaliação teórica que se realiza na Universidade.

Introduction: Evaluations using technology are present in schools in several countries and have become popular in the last two decades and have been used in the United States medical license examination since 1999. The potential that improved technology assessments bring to the academic world motivated the carrying out of this study, and the knowledge from a specific conference on these technologies brought the incentive to persist in this research line. Method: This study aims to compare the stress, satisfaction and performance of academics during the first semester of 2018, when conducting conventional written tests and computer tests in the course of Gynecology and Obstetrics of the medical program of the University of José do Rosário Vellano, Alfenas campus, a total sample of 135 students. It was a randomized experimental study in which the students were divided for the evaluations and pre-defined and class-based questionnaires were applied. Prior to the test, specific questions were given to students to assess the stress involved in their achievement. At the end of the test, the questions were answered to evaluate the satisfaction with the type of the test they took. Each student did a conventional written assessment and a computer assessment. Results: The evaluated students showed greater stress and less satisfaction with the computer-based test compared to the conventional written test, although there was no statistical difference in performance when comparing both. Conclusion: Lack of familiarity and training with the methodology prior to test application resulted an increase in students' stress in the present study, which interfered in the satisfaction with the test using technology, even though there was no difference in the performance scores. The collected information will be used to restructure the format of the tests offered in the Department of Gynecology and Obstetrics of UNIFENAS, Campus Alfenas, in order to improve the theoretical evaluation performed at the University.

Evidências de validade da Bateria Informatizada de Linguagem Oral com prova de raciocínio / Evidence of validity of Computerized Oral Language Battery with reasoning assessment

Este estudo buscou relacionar a compreensão da linguagem oral com a habilidade de raciocinar, visando evidenciar validade correlacional para a Bateria Informatizada de Linguagem Oral por meio da associação com a Escala de Maturidade Mental Colúmbia. Participaram do estudo 82 alunos com idade entre 5 e 9 anos (M=7,05; DP=1,25), sendo 47,6% do sexo feminino. Frequentavam o pré (31,7%) e a 1ª (32,9%) e 2ª (35,4%) séries do Ensino Fundamental de escola pública do interior paulista. Aplicou-se coletivamente a Bateria e individualmente a Escala de Maturidade Mental Colúmbia. A Análise de Variância, por série, indicou diferença significativa para as provas de Compreensão Morfossintática, Sequência Lógica, Organização Lógico-Verbal e escore total da Bateria. A análise de regressão revelou que o raciocínio geral representa 29% das habilidades necessárias para um bom desempenho na Bateria. Verificou-se correlação baixa entre escores totais da Bateria e do Colúmbia, porém muito significativa. Constataram-se evidências de validade correlacional e de critério, para a Bateria.(AU)

The aim of this study was to relate the understanding of oral language to the ability to reason, in order to seek correlational validity evidence of the Computerized Oral Language Battery (Bateria Informatizada de Linguagem Oral) by association with the Columbia Mental Maturity Scale. The participants were 82 schoolchildren between 5 and 9 years of age (M=7.05, SD=1.25). They attended pre-school (31.7%),1st (32.9%) and 2nd (35.4%) grades of elementary public school in São Paulo and 47.6% of whom were girls. The Bateria Informatizada de Linguagem Oral was applied collectively in the school informatics laboratory and the Columbia Mental Maturity Scale, individually. Analysis of Variance for the series, indicated significant statistics differences for the scores of Morphosyntactic prove, Logical sequence prove, Logical Organization prove and for the total score of Bateria Informatizada de Linguagem Oral. Regression analysis revealed that general reason represents 29% of the skills needed to perform well in Bateria Informatizada de Linguagem Oral. There was low, but very significant correlation between total scores of Bateria Informatizada de Linguagem Oral and Columbia Mental Maturity Scale. These results indicated validity evidences to Bateria Informatizada de Linguagem Oral.(AU)

Evidências de validade da Bateria Informatizada de Linguagem Oral com prova de raciocínio / Evidence of validity of Computerized Oral Language Battery with reasoning assessment

Este estudo buscou relacionar a compreensão da linguagem oral com a habilidade de raciocinar, visando evidenciar validade correlacional para a Bateria Informatizada de Linguagem Oral por meio da associação com a Escala de Maturidade Mental Colúmbia. Participaram do estudo 82 alunos com idade entre 5 e 9 anos (M=7,05; DP=1,25), sendo 47,6% do sexo feminino. Frequentavam o pré (31,7%) e a 1ª (32,9%) e 2ª (35,4%) séries do Ensino Fundamental de escola pública do interior paulista. Aplicou-se coletivamente a Bateria e individualmente a Escala de Maturidade Mental Colúmbia. A Análise de Variância, por série, indicou diferença significativa para as provas de Compreensão Morfossintática, Sequência Lógica, Organização Lógico-Verbal e escore total da Bateria. A análise de regressão revelou que o raciocínio geral representa 29% das habilidades necessárias para um bom desempenho na Bateria. Verificou-se correlação baixa entre escores totais da Bateria e do Colúmbia, porém muito significativa. Constataram-se evidências de validade correlacional e de critério, para a Bateria.

The aim of this study was to relate the understanding of oral language to the ability to reason, in order to seek correlational validity evidence of the Computerized Oral Language Battery (Bateria Informatizada de Linguagem Oral) by association with the Columbia Mental Maturity Scale. The participants were 82 schoolchildren between 5 and 9 years of age (M=7.05, SD=1.25). They attended pre-school (31.7%),1st (32.9%) and 2nd (35.4%) grades of elementary public school in São Paulo and 47.6% of whom were girls. The Bateria Informatizada de Linguagem Oral was applied collectively in the school informatics laboratory and the Columbia Mental Maturity Scale, individually. Analysis of Variance for the series, indicated significant statistics differences for the scores of Morphosyntactic prove, Logical sequence prove, Logical Organization prove and for the total score of Bateria Informatizada de Linguagem Oral. Regression analysis revealed that general reason represents 29% of the skills needed to perform well in Bateria Informatizada de Linguagem Oral. There was low, but very significant correlation between total scores of Bateria Informatizada de Linguagem Oral and Columbia Mental Maturity Scale. These results indicated validity evidences to Bateria Informatizada de Linguagem Oral.