Foutmarge en statistische significantie uitgelegd
Enquêteresultaten komen uit een steekproef en zijn dus schattingen. Deze twee berekeningen laten zien hoeveel gewicht een schatting kan dragen: de foutmarge beschrijft de nauwkeurigheid van één resultaat en een significantietoets laat zien of twee resultaten echt verschillen.
Wat is de foutmarge?
De foutmarge is het bereik rond een enquêteresultaat waarbinnen de werkelijke waarde voor uw hele doelgroep waarschijnlijk ligt. Als 62% van 500 respondenten tevreden is, is de foutmarge bij 95% betrouwbaarheid ±4,25 procentpunten. De werkelijke waarde ligt hoogstwaarschijnlijk tussen 57,7% en 66,3%. Dat bereik heet het betrouwbaarheidsinterval.
Hoe maak ik de foutmarge kleiner?
Verzamel meer reacties. De marge krimpt met de wortel van de steekproefgrootte, dus u heeft vier keer zoveel reacties nodig om haar te halveren. Gebruik de steekproefcalculator om het aantal reacties te vinden dat past bij de marge die u wilt.
Wat betekent statistisch significant?
Twee groepen geven bijna nooit precies hetzelfde resultaat. Een significantietoets controleert of het verschil groter is dan u op basis van toeval alleen zou verwachten. Is dat zo, dan heet het verschil statistisch significant.
Hoe lees ik de p-waarde?
De p-waarde is de kans op een verschil dat minstens zo groot is als de twee groepen in werkelijkheid gelijk zouden zijn. Een kleine p-waarde betekent dat toeval een onwaarschijnlijke verklaring is. Bij een betrouwbaarheidsniveau van 95% geldt een p-waarde van 0,05 of lager als significant.
Een rekenvoorbeeld
In groep A zijn 300 van de 500 respondenten (60%) tevreden. In groep B zijn dat er 250 van de 500 (50%). Het verschil is 10 procentpunten, de z-score is 3,18 en de p-waarde is 0,0015. Dat ligt ruim onder 0,05, dus het verschil is statistisch significant bij 95% betrouwbaarheid.
Significant betekent niet altijd belangrijk
Bij zeer grote steekproeven wordt zelfs een heel klein verschil statistisch significant. Kijk daarom altijd ook naar de grootte van het verschil en vraag u af of het groot genoeg is om er iets mee te doen.