O que significa o valor de p

Poucos números são tão citados — e tão mal interpretados — quanto o valor de p. Ele aparece em quase todo artigo, mas a frase "deu p menor que 0,05, então está provado" esconde vários equívocos. Entender o que o valor de p realmente significa (e o que ele não significa) é o que separa uma análise sólida de uma conclusão frágil.

A definição correta

O valor de p é a probabilidade de observar um resultado tão extremo quanto o seu — ou mais extremo —, assumindo que a hipótese nula é verdadeira. A hipótese nula, em geral, afirma que não há efeito: nenhuma diferença entre os grupos, nenhuma associação.

Em outras palavras: se de fato não houvesse efeito algum, com que frequência o acaso produziria dados tão "chamativos" quanto os que você encontrou? Quanto menor o valor de p, mais raro esse resultado seria sob a hipótese nula — e, portanto, mais ele a contraria.

O que o valor de p NÃO é

Aqui mora a maioria dos erros. O valor de p não é:

• A probabilidade de a hipótese nula ser verdadeira. Ele é calculado supondo a nula verdadeira; não pode, ao mesmo tempo, medir a chance de ela ser verdadeira.
• A probabilidade de o resultado ter ocorrido por acaso. Essa é uma simplificação enganosa.
• Uma medida do tamanho ou da importância do efeito. Um p minúsculo pode acompanhar um efeito clinicamente irrelevante.
• Prova de que a hipótese alternativa é verdadeira. Ele apenas quantifica a incompatibilidade dos dados com a nula.

O problema do "p < 0,05" isolado

O limiar de 0,05 é uma convenção, não uma lei da natureza. Tratar 0,049 como "sucesso" e 0,051 como "fracasso" é arbitrário — os dois resultados são praticamente idênticos. Dois problemas decorrem do uso cego desse limiar:

1. Significância não é relevância

Com uma amostra grande o suficiente, diferenças minúsculas e sem qualquer importância clínica atingem p < 0,05. Por outro lado, um efeito clinicamente relevante pode dar p > 0,05 em uma amostra pequena, por falta de poder estatístico. O valor de p depende tanto do tamanho do efeito quanto do tamanho da amostra.

2. p > 0,05 não prova ausência de efeito

"Não significativo" significa apenas que não houve evidência suficiente para rejeitar a nula — não que o efeito seja zero. Ausência de evidência não é evidência de ausência. Confundir os dois é um dos erros mais comuns em discussões de resultados.

O que reportar junto com o valor de p

Um resultado bem comunicado nunca se resume ao valor de p. Reporte sempre:

• O tamanho do efeito — a diferença de médias, a razão de chances (odds ratio), o risco relativo. É o que diz quanto muda.
• O intervalo de confiança — a faixa de valores plausíveis para o efeito, que comunica a precisão da estimativa. Veja o informativo sobre intervalo de confiança.
• O valor de p exato (ex.: p = 0,03), em vez de apenas "p < 0,05" ou "NS".

Diretrizes de relato como o checklist STROBE/CONSORT reforçam exatamente isso: apresentar estimativas com seus intervalos de confiança, não só a significância. O valor de p é uma peça do quadro — não o quadro inteiro.