Margines błędu i istotność statystyczna w praktyce
Wyniki ankiety pochodzą z próby, więc są oszacowaniami. Te dwa obliczenia pokazują, na ile można na oszacowaniu polegać: margines błędu opisuje dokładność jednego wyniku, a test istotności mówi, czy dwa wyniki naprawdę się różnią.
Czym jest margines błędu?
Margines błędu to zakres wokół wyniku ankiety, w którym prawdopodobnie mieści się rzeczywista wartość dla całej grupy docelowej. Jeśli 62% z 500 respondentów jest zadowolonych, margines błędu przy ufności 95% wynosi ±4,25 pkt proc. Rzeczywista wartość najprawdopodobniej mieści się między 57,7% a 66,3%. Ten zakres nazywa się przedziałem ufności.
Jak zmniejszyć margines błędu?
Zbierz więcej odpowiedzi. Margines maleje wraz z pierwiastkiem kwadratowym z wielkości próby, więc aby zmniejszyć go o połowę, potrzebujesz czterokrotnie więcej odpowiedzi. Skorzystaj z kalkulatora wielkości próby, aby znaleźć liczbę odpowiedzi odpowiadającą marginesowi, na którym Ci zależy.
Co oznacza „istotny statystycznie”?
Dwie grupy prawie nigdy nie dają dokładnie tego samego wyniku. Test istotności sprawdza, czy różnica jest większa, niż można by oczekiwać wyłącznie z przypadku. Jeśli tak, różnicę nazywa się istotną statystycznie.
Jak czytać wartość p?
Wartość p to prawdopodobieństwo zaobserwowania co najmniej tak dużej różnicy, gdyby obie grupy w rzeczywistości były takie same. Mała wartość p oznacza, że przypadek jest mało prawdopodobnym wyjaśnieniem. Przy poziomie ufności 95% wartość p równa 0,05 lub mniejsza jest uznawana za istotną.
Przykład obliczeń
W grupie A zadowolonych jest 300 z 500 respondentów (60%). W grupie B jest ich 250 z 500 (50%). Różnica wynosi 10 pkt proc., wartość Z to 3,18, a wartość p to 0,0015. To znacznie poniżej 0,05, więc różnica jest istotna statystycznie przy ufności 95%.
Istotny nie zawsze znaczy ważny
Przy bardzo dużych próbach nawet niewielka różnica staje się istotna statystycznie. Zawsze zwracaj też uwagę na wielkość różnicy i zastanów się, czy jest na tyle duża, by warto było działać.
