O que é “estatisticamente significante”?

“Para ser sincero, é uma ideia complicada. Isso pode nos dizer se a diferença entre um medicamento e um placebo ou entre as esperanças de vida de dois grupos de pessoas, por exemplo, pode dever-se ao efeito do acaso… Isso significa que uma diferença tão grande como a que foi observada é improvável que tenha ocorrido somente por acaso. Os estatísticos usam níveis padrão de ‘improvável’. Geralmente, usam significativo no nível 5% (por vezes escrito como p = 0,05). Nesse caso, uma diferença é considerada ‘significativa’ porque tem probabilidade de menos de 1 em 20 de ocorrer somente por obra do acaso.”

Spiegelhalter D, citado em: Making sense of statistics. 2010. Disponível em: www.senseaboutscience.org