A/B Test Hesaplayıcı.
B varyantı gerçekten mi daha iyi, yoksa şans mı? İstatistik konuşsun.
Bu araç nedir?
A/B test hesaplayıcısı, iki sürümün (örneğin iki farklı başlık, buton ya da fiyat sayfası) dönüşüm oranları arasındaki farkın gerçek mi yoksa şans eseri mi olduğunu söyler. İki oranlı z testi kullanır; dünyada ürün ekiplerinin standart yöntemi budur. %95 güven düzeyine ulaşmayan fark, karar almak için yeterli sayılmaz.
Nasıl kullanılır?
- A varyantını gören ziyaretçi sayısını ve bunların kaçının dönüştüğünü (satın alma, kayıt, tıklama) gir.
- Aynısını B varyantı için yap.
- Sonuçta iki oranı, aradaki göreli farkı ve güven düzeyini görürsün.
- %95 ve üzeri güven "anlamlı fark var" demektir; altındaysa test toplamaya devam et.
İpucu: Testi erken durdurma: gün içi dalgalanmalar yanıltır. En az bir tam hafta ve varyant başına birkaç yüz dönüşüm görmeden karar verme.