O que o valor p diz

O valor p é a probabilidade de obter um resultado pelo menos tão extremo quanto o observado se a hipótese nula fosse verdadeira. No gráfico, é a área destacada sob a curva além da estatística do teste: quanto mais a estatística se afasta de zero, menor a área.

Ele é comparado com o nível de significância α escolhido antes de olhar os dados, geralmente 0,05. Se p for menor que α, o resultado é chamado estatisticamente significativo e a hipótese nula é rejeitada; caso contrário, os dados não bastam para rejeitá-la, o que não é o mesmo que prová-la.

O teste z é usado quando o desvio padrão da população é conhecido ou a amostra é grande; o teste t, quando ele é estimado pela amostra, com n − 1 graus de liberdade. Um teste bilateral procura diferenças nas duas direções, um unilateral só na que a hipótese indica.

Erros comuns

  • Ler p como a probabilidade de a hipótese nula ser verdadeira: é a probabilidade dos dados, supondo a hipótese verdadeira.
  • Mudar para um teste unilateral depois de ver os dados para baixar p de 0,05.
  • Confundir significância estatística com importância prática: com amostras enormes, diferenças mínimas dão valores p pequenos.

Perguntas frequentes

Qual valor p é considerado significativo?

Depende de α, definido antes da análise. O mais usado é 0,05; em medicina e física usam-se limites mais rigorosos, como 0,01 ou muito menos.

Quando usar z e quando usar t?

Usa-se t quando o desvio padrão é estimado pela amostra, ou seja, quase sempre com dados reais. Com muitos graus de liberdade, a t é praticamente igual à normal.

Por que o valor p bilateral é o dobro?

Porque conta como extremos os resultados nas duas direções: a área além de |estatística| à direita mais a área simétrica à esquerda.

Como funciona este cálculo

Com F a função de distribuição acumulada e T a estatística: unilateral à esquerda p = F(T), à direita p = 1 − F(T), bilateral p = 2·min(F(T), 1 − F(T)). A normal é calculada pela função gama incompleta e a t de Student pela função beta incompleta regularizada; os valores críticos vêm da inversão de F.