Minimum Tespit Edilebilir Etki (MDE) Nedir?
Minimum tespit edilebilir etki (MDE), bir testin planlanan örneklem ve güven düzeyiyle güvenilir biçimde ayırt edebildiği en küçük dönüşüm farkıdır.
Minimum Tespit Edilebilir Etki (MDE) Nasıl Belirlenir?
MDE, testin görebileceği en küçük gerçek farkı ifade eder. Test planlanırken “bu değişiklik dönüşümü en az ne kadar artırırsa değerli sayarım” sorusu sorulur ve yanıt MDE olarak girilir. Etki göreli ifade edilir:
Göreli etki = (varyant dönüşüm oranı - kontrol dönüşüm oranı) / kontrol dönüşüm oranı x 100
Örnek (varsayımsal): kontrol dönüşüm oranı yüzde 2, varyant yüzde 2,2 ise göreli etki yüzde 10’dur. MDE yüzde 10 olarak belirlenmişse test, bu büyüklükteki bir farkı ayırt etmek üzere örneklem büyüklüğü ile planlanır.
- MDE küçüldükçe gereken örneklem artar.
- MDE işletme için anlamlı bir iyileşme düzeyi olmalıdır.
- Etki göreli ve mutlak olarak ayrı ifade edilebilir.
Minimum Tespit Edilebilir Etki (MDE) Neden Önemlidir?
MDE, testin gerçekçi planlanmasını sağlar. Çok küçük bir etkiyi yakalamak isterseniz haftalarca süren testler gerekir; büyük etkiyi hedeflerseniz test kısa sürer ama küçük iyileşmeleri kaçırırsınız. Bu denge, trafik miktarına ve değişikliğin maliyetine göre kurulur.
MDE aynı zamanda sonucu yorumlamayı kolaylaştırır. Test sonunda fark MDE’den küçükse “etki yok” demek doğru olmaz; yalnızca “bu testle ayırt edilemedi” demek doğrudur. Bu nedenle sonuç istatistiksel anlamlılık ile birlikte, planlanan MDE bağlamında okunur.
Karar noktası, MDE’yi iş hedefine bağlamaktır: küçük bir artış ciroda ne kadar fark yaratıyorsa test o kadar çaba harcamaya değer sayılır.
Pratikte MDE seçerken geçmiş testlerin ortalama etkisi de bilgi verir. Önceki denemeler çoğunlukla küçük fark üretmişse çok büyük bir MDE belirlemek gerçekçi olmaz ve test sonuçsuz kalır.
MDE’de Sık Yapılan Hatalar
- MDE’yi hiç belirlememek. Test süresi ve kapsamı belirsiz kalır.
- Gerçekçi olmayan büyük etki beklemek. Test küçük gerçek etkiyi kaçırır.
- Mutlak ve göreli farkı karıştırmak. Hesap hatalı çıkar.
- Sonucu yalnızca anlamlı ya da anlamsız diye okumak. Test gücü gözden kaçar.
Minimum Tespit Edilebilir Etki Hakkında Sık Sorulan Sorular
Test sonunda fark MDE’den küçük çıkarsa nasıl yorumlanır?
Bu sonuç etkinin olmadığı anlamına gelmez; yalnızca farkın bu testle ayırt edilemediğini gösterir. Sonuç istatistiksel anlamlılıkla birlikte ve planlamada seçilen MDE bağlamında okunur.
MDE küçülürse ne olur?
Daha küçük bir farkı güvenilir biçimde ayırt etmek için gereken örneklem büyür, test de uzar. Çok küçük bir etkiyi yakalamak haftalarca süren testler gerektirebilir; bu yüzden MDE, mevcut trafik ve değişikliğin maliyetiyle dengelenir.
MDE nasıl seçilir?
Değişikliğin işletmeye getireceği anlamlı iyileşme düzeyine ve mevcut trafiğe göre seçilir.