Örneklem Büyüklüğü Nedir?
Örneklem büyüklüğü, bir testte güvenilir bir sonuç elde etmek için her sürümün kaç ziyaretçi ya da dönüşüm gözlemesi gerektiğini ifade eden sayıdır.
Örneklem Büyüklüğü Nasıl Belirlenir?
Örneklem büyüklüğü, testi başlatmadan önce hesaplanır. Dört girdi gerekir: mevcut dönüşüm oranı, tespit edilmek istenen en küçük fark (MDE), istenen güven düzeyi ve test gücü. Bu değerler bir örneklem hesaplayıcısına girilir ve sürüm başına gereken ziyaretçi sayısı bulunur.
Dönüşüm oranı düşükse ve tespit edilecek fark küçükse gereken örneklem büyür. Örnek (varsayımsal): düşük dönüşümlü bir sayfada küçük bir farkı kanıtlamak, büyük bir farkı kanıtlamaktan çok daha fazla ziyaretçi gerektirir. Hesaplayıcı çıktısı test süresine çevrilir: gereken sayı günlük trafiğe bölünür.
- Mevcut dönüşüm oranı
- Tespit edilecek en küçük fark
- Güven düzeyi ve test gücü
Örneklem Büyüklüğü Neden Önemlidir?
Yetersiz örneklemle yapılan test, rastlantısal farkı gerçek etki gibi gösterebilir. Çok küçük örneklem, gerçek etkiyi de yakalayamaz. Bu yüzden test, hedef örnekleme ulaşmadan bitirilmemelidir; erken bakıp sonucu beğenince durdurmak, hatalı karara yol açar. Bu konu istatistiksel anlamlılık ile doğrudan ilgilidir.
Ayrıca test süresi en az bir tam iş haftası kapsamalıdır; hafta içi ve hafta sonu davranışı farklıdır. Karar noktası, testi başlatmadan önce süreyi ve hedef örneklemi yazmak ve süre dolmadan sonuçlandırmamaktır.
Trafik yetersizse testi yapmak yerine daha büyük ve daha belirgin değişiklikler denenir; küçük etkiler düşük trafikli sitede ölçülemez.
Test planına başlamadan önce sayfanın gerçek günlük trafiği ve dönüşüm sayısı doğrulanmalıdır. Tahmini değerlerle yapılan hesap, gerçek trafik düşükse testin haftalarca sürmesine neden olur ve plan bozulur.
Örneklem Büyüklüğünde Sık Yapılan Hatalar
- Örneklemi hesaplamadan başlamak. Test ne zaman biteceği belirsiz kalır.
- Erken bakıp durdurmak. Rastlantısal fark kazanan sanılır.
- Hafta döngüsünü kapsamamak. Sonuç dönemsel davranıştan etkilenir.
- Çok küçük fark peşinden gitmek. Gereken örneklem ulaşılamaz olur.
Örneklem Büyüklüğü Hakkında Sık Sorulan Sorular
Örneklem büyüklüğü test süresine nasıl çevrilir?
Hesaplayıcının verdiği gerekli ziyaretçi sayısı, sayfanın günlük trafiğine bölünerek test süresi bulunur. Süre en az bir tam iş haftasını kapsamalıdır. Hesapta tahmini değil doğrulanmış günlük trafik ve dönüşüm sayısı kullanılmazsa test planlanandan çok daha uzun sürebilir.
Örneklem büyüklüğü nasıl hesaplanır?
Mevcut dönüşüm oranı, tespit edilecek en küçük fark, güven düzeyi ve test gücü ile bir örneklem hesaplayıcısında hesaplanır.
Test hedef örnekleme ulaşmadan bitirilebilir mi?
Bitirilmemelidir. Hedef örnekleme ulaşmadan alınan sonuç, rastlantısal bir farkı gerçek etki gibi gösterebilir; ara sonuçlara bakıp beğenilen anda testi durdurmak da hatalı karara götürür. Süre ve hedef örneklem test başlamadan yazılır, süre dolmadan karar verilmez.