Compreender a margem de erro e a significância estatística
Os resultados de um inquérito provêm de uma amostra, por isso são estimativas. Estes dois cálculos dizem-lhe quanto peso pode dar a uma estimativa: a margem de erro descreve a precisão de um resultado, e um teste de significância diz-lhe se dois resultados são realmente diferentes.
O que é a margem de erro?
A margem de erro é o intervalo em torno de um resultado de inquérito no qual o valor real de todo o seu público provavelmente se encontra. Se 62% de 500 inquiridos estiverem satisfeitos, a margem de erro com 95% de confiança é de ±4,25 pontos percentuais. O valor real está muito provavelmente entre 57,7% e 66,3%. Esse intervalo chama-se intervalo de confiança.
Como reduzo a margem de erro?
Recolha mais respostas. A margem diminui com a raiz quadrada da dimensão da amostra, pelo que precisa de quatro vezes mais respostas para a reduzir para metade. Use a calculadora de dimensão da amostra para encontrar o número de respostas que corresponde à margem pretendida.
O que significa estatisticamente significativo?
Dois grupos quase nunca dão exatamente o mesmo resultado. Um teste de significância verifica se a diferença é maior do que seria de esperar apenas por acaso. Se for, diz-se que a diferença é estatisticamente significativa.
Como interpreto o valor p?
O valor p é a probabilidade de observar uma diferença pelo menos tão grande se os dois grupos fossem, na realidade, iguais. Um valor p pequeno significa que o acaso é uma explicação pouco provável. Com um nível de confiança de 95%, um valor p de 0,05 ou inferior é considerado significativo.
Um exemplo prático
No grupo A, 300 de 500 inquiridos (60%) estão satisfeitos. No grupo B, estão 250 de 500 (50%). A diferença é de 10 pontos percentuais, o valor Z é 3,18 e o valor p é 0,0015. Está muito abaixo de 0,05, pelo que a diferença é estatisticamente significativa com 95% de confiança.
Significativo nem sempre quer dizer importante
Com amostras muito grandes, até uma diferença mínima se torna estatisticamente significativa. Olhe sempre também para a dimensão da diferença e pergunte-se se é suficientemente grande para justificar uma ação.