Entenda a margem de erro e a significância estatística
Os resultados de uma pesquisa vêm de uma amostra, portanto são estimativas. Estes dois cálculos mostram quanto peso uma estimativa pode ter: a margem de erro descreve a precisão de um resultado, e um teste de significância mostra se dois resultados são realmente diferentes.
O que é a margem de erro?
A margem de erro é o intervalo em torno de um resultado de pesquisa no qual o valor real de todo o seu público provavelmente está. Se 62% de 500 respondentes estão satisfeitos, a margem de erro com 95% de confiança é de ±4,25 pontos percentuais. O valor real está muito provavelmente entre 57,7% e 66,3%. Esse intervalo é chamado de intervalo de confiança.
Como reduzir a margem de erro?
Colete mais respostas. A margem diminui com a raiz quadrada do tamanho da amostra, então você precisa de quatro vezes mais respostas para reduzi-la pela metade. Use a calculadora de tamanho de amostra para encontrar o número de respostas que corresponde à margem desejada.
O que significa estatisticamente significativo?
Dois grupos quase nunca apresentam exatamente o mesmo resultado. Um teste de significância verifica se a diferença é maior do que seria esperado apenas pelo acaso. Se for, a diferença é chamada de estatisticamente significativa.
Como interpretar o valor p?
O valor p é a probabilidade de observar uma diferença pelo menos tão grande se os dois grupos fossem, na verdade, iguais. Um valor p pequeno significa que o acaso é uma explicação pouco provável. Com nível de confiança de 95%, um valor p de 0,05 ou menor é considerado significativo.
Um exemplo prático
No grupo A, 300 de 500 respondentes (60%) estão satisfeitos. No grupo B, são 250 de 500 (50%). A diferença é de 10 pontos percentuais, o escore Z é 3,18 e o valor p é 0,0015. Isso está bem abaixo de 0,05, então a diferença é estatisticamente significativa com 95% de confiança.
Significativo nem sempre quer dizer importante
Com amostras muito grandes, até uma diferença mínima se torna estatisticamente significativa. Observe sempre também o tamanho da diferença e pergunte se ela é grande o bastante para justificar uma ação.
