Calcular E Apresentar Tamanhos Do Efeito EM Trabalhos Científicos (1): As Limitações Do P < 0,05 Na Análise De Diferenças De Médias De Dois Grupos (Calculating and Reporting Effect Sizes on Scientific Papers (1): P < 0.05 Limitations in the Analysis of Mean Differences of Two Groups)

Revista Portuguesa de Investigação Comportamental e Social, 1(1):3-16. DOI: 10.7342/ismt.rpics.2015.1.1.14

14 Pages Posted: 15 Jul 2017

See all articles by Helena Espirito Santo

Helena Espirito Santo

Instituto Superior Miguel Torga; Universidade de Coimbra - Centro de Investigação do Núcleo de Estudos e Intervenção Cognitivo- Comportamental

Fernanda Daniel

Instituto Superior Miguel Torga

Date Written: July 8, 2017

Abstract

Portuguese Abstract: A Revista Portuguesa de Investigação Comportamental e Social exige que os autores sigam as recomendações do Publication Manual of the American Psychological Association (APA , 2010) na apresentação da informação estatística. Uma das recomendações da APA é de que os tamanhos do efeito sejam apresentados associados aos níveis de significância estatística. Uma vez que os valores de p decorrentes dos resultados dos testes estatísticos não informam sobre a magnitude ou importância de uma diferença, devem então reportar-­se os tamanhos do efeito (TDE). De facto, os TDE dão significado aos testes estatísticos, enfatizam o poder dos testes estatísticos, reduzem o risco de a mera variação amostral ser interpretada como relação real, podem aumentar o relato de resultados " não-­significativos " e permitem acumular conhecimento de vários estudos usando a meta-­análise. Assim, os objetivos deste artigo são os de apresentar os limites do nível de significância; descrever os fundamentos da apresentação dos TDE dos testes estatísticos para análise de diferenças entre dois grupos; apresentar as fórmulas para calcular os TDE, fornecendo exemplos de estudos nossos; apresentar procedimentos de cálculo dos intervalos de confiança; fornecer as fórmulas de conversão para revisão da literatura; indicar como interpretar os TDE; e ainda mostrar que, apesar de frequentemente ser interpretável, o significado (efeito pequeno, médio ou grande para uma métrica arbitrária) pode ser impreciso, havendo necessidade de ser interpretado no contexto da área de investigação e de variáveis do mundo real.

English Abstract: The Portuguese Journal of Behavioral and Social Research requires authors to follow the recommendations of the Publication Manual of the American Psychological Association (APA, 2010) in the presentation of statistical information. One of the APA recommendations is that effect sizes should be presented along with levels of statistical significance. Since p-values from the results of the statistical tests do not indicate the magnitude or importance of a difference, then effect sizes (ES) should be reported. In fact, ES give meaning to statistical tests; emphasize the power of statistical tests; reduce the risk of interpret mere sampling variation as real relationship; can increase the reporting of “non-significant"results, and allow the accumulation of knowledge from several studies using meta-analysis. Thus, the objectives of this paper are to present the limits of the significance level; describe the foundations of presentation of ES of statistical tests to analyze differences between two groups; present the formulas to calculate directly ES, providing examples of our own previous studies; show how to calculate confidence intervals; provide the conversion formulas for the review of the literature; indicate how to interpret the ES; and show that, although interpretable, the meaning (small, medium or large effect for an arbitrary metric) could be inaccurate, requiring that interpretation should be made in the context of the research area and in the context of real-world variables. 

Note: Downloadable document is available in Portuguese.

Keywords: p-value, effect size, Student's test

Suggested Citation

Espirito Santo, Helena and Daniel, Fernanda, Calcular E Apresentar Tamanhos Do Efeito EM Trabalhos Científicos (1): As Limitações Do P < 0,05 Na Análise De Diferenças De Médias De Dois Grupos (Calculating and Reporting Effect Sizes on Scientific Papers (1): P < 0.05 Limitations in the Analysis of Mean Differences of Two Groups) (July 8, 2017). Revista Portuguesa de Investigação Comportamental e Social, 1(1):3-16. DOI: 10.7342/ismt.rpics.2015.1.1.14, Available at SSRN: https://ssrn.com/abstract=2999091

Helena Espirito Santo (Contact Author)

Instituto Superior Miguel Torga ( email )

Largo da Cruz de Celas nº1
Coimbra, Coimbra 3000-132
Portugal
239404608 (Phone)

Universidade de Coimbra - Centro de Investigação do Núcleo de Estudos e Intervenção Cognitivo- Comportamental ( email )

Portugal

Fernanda Daniel

Instituto Superior Miguel Torga ( email )

Largo da Cruz de Celas nº1
Coimbra, Coimbra 3000-132
Portugal

Here is the Coronavirus
related research on SSRN

Paper statistics

Downloads
640
Abstract Views
2,576
rank
46,180
PlumX Metrics