En låg baslinje kostar trafik
Ju mer sällsynt konverteringen är, desto fler besökare krävs för att skilja en verklig förändring från brus. Grovt räknat fördubblar en halvering av din grundläggande konverteringsgrad den trafik varje variant behöver.
Gratisverktyg
Kalkylator för stickprovsstorlek i A/B-test
Innan du lanserar ett experiment, ta reda på hur många besökare varje variant behöver för att resultatet ska vara pålitligt. Ange dina siffror så uppdateras kalkylatorn direkt, allt i din webbläsare.
31,232
besökare som behövs per variant
62,464 besökare totalt fördelat på två varianter
Vad som driver siffran
Varför stickprovsstorleken rör sig så mycket som den gör
Den detekterbara effekten är den stora spaken
Minsta detekterbara effekt går in i formeln i kvadrat och dominerar därför allt annat. Att vilja upptäcka en förbättring på 5 % i stället för 10 % kostar ungefär fyra gånger så mycket trafik — bestäm vilken storlek på vinst som faktiskt skulle ändra ditt beslut, och testa för den.
Bestäm längden innan du börjar
Omvandla siffran ovan till hela veckor av trafik, och kör sedan under den tiden. Att stoppa så fort ett resultat blir signifikant är det vanligaste sättet team levererar ändringar som inte håller.
Vanliga frågor
Om stickprovsstorlek
Hur beräknas stickprovsstorleken för ett A/B-test?
Det här verktyget använder standardformeln för två proportioner och utgår från din utgångskonverteringsgrad, den minsta effekt du vill kunna upptäcka, vald konfidensnivå och statistisk styrka för att uppskatta hur många besökare som krävs per variant.
Vad är en minsta detekterbara effekt?
Den minsta detekterbara effekten är den minsta relativa förändringen i konverteringsgrad som du vill att testet ska kunna upptäcka tillförlitligt. Mindre effekter kräver större stickprov.
Varför behöver mitt test så många besökare?
Lägre baskonverteringsgrad, mindre effekter, högre konfidensnivå och högre styrka ökar alla den stickprovsstorlek som krävs för att undvika falska positiva och falska negativa resultat.
Relaterat
Mer från PulsePanda
Kör testet, se sedan sessionerna
PulsePanda kopplar dina experiment till session replay, heatmaps, trattar och feedback, så att du förstår varför du vann.
Kom igång gratis