A review of the statistical methods used in sports and exercise sciences PhD theses: a case study in a single post-graduate program / Uma revisão dos métodos estatísticos usados em teses de doutorado nas ciências do esporte e do exercício: um estudo de caso em um único programa de pós-graduação

ABSTRACT

This study aimed to describe the statistical methods used in PhD thesis in sports and exercise sciences, and to examine the time trends of statistical methods prevalence. We analyzed 50 PhD theses supported by a post-graduate program recognized by CAPES and defended between January 2003 and December 2013. Most theses used more than two statistical methods, and T-test, ANOVA, multiple comparisons, correlation and reliability analysis were the most used approaches. Less than 50% of both experimental and observational theses reported the effect size (ES), confidence interval (CI), sample size calculation and observed power analysis. The use of multiple comparisons in experimental studies significantly increased in the last 5-years (63.2%) compared to 2004-2008 period. No other significant changes were observed. Results suggest that several statistical methods are used in quantitative design studies. Due to the observed large prevalence of statistical deficiencies (lack of reporting ES, CI, power analysis), postgraduate programs should have qualified statisticians with a major say in checking the statistical quality of PhD theses and subsequent articles, besides supervisors more concerned to the statistical methods...(AU)

RESUMO

Este estudo teve como objetivo descrever os métodos estatísticos utilizados em teses de doutorado em ciências do esporte e do exercício e examinar as tendências temporais da prevalência desses métodos. Foram analisadas 50 teses de doutorado desenvolvidas em programa de pós-graduação reconhecido pela CAPES e defendidas entre janeiro de 2003 e dezembro de 2013. A maioria das teses utilizou mais de dois métodos estatísticos. Teste t, ANOVA, comparações múltiplas, correlação e análise de confiabilidade foram as abordagens mais utilizadas. Menos de 50% das teses experimentais e observacionais relataram o tamanho do efeito (ES), intervalo de confiança (CI), cálculo do tamanho da amostra e análise de potência observada. O uso de comparações múltiplas em estudos experimentais aumentou significativamente (63,2%) nos últimos 5 anos em relação ao período de 2004-2008. Não foram observadas outras alterações significativas. Os resultados sugerem que vários métodos estatísticos são usados em estudos de design quantitativo. Devido à grande prevalência observada de deficiências estatísticas (falta de notificação de ES, IC, análise de potência), os programas de pós-graduação devem ter estatísticos qualificados com grande influência no controle da qualidade estatística das teses de doutorado e artigos subsequentes, além disso, orientadores deveriam ter maior preocupação em relação aos métodos...(AU)