Engelli A/B Testi — Bloklu Rastgele Bölme Testi
Blocked A/B Test (Block-Randomized Split Test) · Ayrıca şöyle bilinir: block-randomized A/B test, stratified A/B test, blocked split test, block-design A/B experiment
Engelli bir A/B testi, birimlerin (kullanıcılar, denekler veya kümeler) her blok içinde tedavi A veya tedavi B'ye rastgele atanmadan önce homojen bloklara ayrıldığı bir deneysel tasarımdır. Bloklama, varyasyonun bilinen kaynaklarının — cihaz türü, coğrafya veya kullanıcı süresi gibi — koşullar arasında dengelenmesini sağlayarak deney içi gürültüyü azaltır ve basit engelsiz bir A/B testinden daha kesin tedavi etkisi tahminleri sağlar.
Tam yöntemi oku
Bu bölümü okumak için ücretsiz hesapla giriş yapın.
Yöntem haritası
İlişkili yöntemlerin komşuluğu — keşfetmek için bir düğüm seçin.
Ne zaman kullanılır
Bir kovaryetin (cihaz türü, kullanıcı segmenti, coğrafi bölge, zaman perdesc) birincil metriğinizle ilişkili olduğunu önceden bildiğinizde ve o kovaryet üzerindeki dengesizliğin hata tahmininizi şişirmesini önlemek istediğinizde engelli bir A/B testi kullanın. Özellikle örneklem boyutlarının orta düzeyde olduğu ve basit rastgeleleştirmenin hata içinde bırakacağı varyansı karşılayamayacağınız durumlarda değerlidir. Anlamlı prognostik kovaryetleriniz olmadığında bloklama kullanmayın — ek yük gereksizdir ve blok boyutu kısıtlamaları gücü azaltabilir. Bloklama değişkeninin her koşulda en az birkaç birim içeren bloklar oluşturamayacak kadar ince taneli olduğu veya blok üyeliğinin atamadan önce belirlenemediği durumlarda kaçının.
Güçlü yönler & sınırlılıklar
- Bilinen prognostik kovaryetlere atfedilebilen deneysel hata varyansını azaltır, örneklem boyutunu artırmadan istatistiksel gücü artırır.
- Sonlu örneklemlerde tedavi etkisi tahminlerini yanlı hale getirebilecek kazara kovaryet dengesizliğine karşı korur.
- Blok tahminleri, segmentler arasında heterojen tedavi etkileri hakkında faydalı bilgiler sağlayabilir.
- Standart istatistiksel paketlerde (ANOVA, göstergelerle regresyon, karma modeller) yaygın olarak desteklenir.
- Klinik ve tarımsal araştırmalarda kullanılan altın standart blok tasarımına doğrudan benzer, yaklaşıma güçlü metodolojik güvenilirlik kazandırır.
- Bloklama değişkenlerinin önceden tanımlanmasını gerektirir; atamadan önce bilinmeyen veya ölçülmeyen değişkenler bloklama için kullanılamaz.
- Çok küçük blok boyutları (örneğin, blok başına yalnızca 2-4 birim) blok içi rastgeleleştirmenin güvenilirliğini azaltır ve güce yardımcı olmak yerine zarar verebilir.
- Analiz, basit bir iki örneklem t-testinden daha karmaşıktır; blok yapısı istatistiksel modele doğru bir şekilde dahil edilmelidir.
- Yanlış değişkene bloklama (sonuçla ilişkisiz olan) varyans azaltımı sağlamaz ve analitik ek yük ekler.
SSS
Engelli bir A/B testi ile tabakalı bir A/B testi arasındaki fark nedir?
Terimler uygulamalı ortamlarda sıklıkla birbirinin yerine kullanılır. Kesin olarak, bloklama bir tasarım kavramıdır (gruplar içindeki birimlerin atanması), tabakalaşma ise hem tasarıma hem de analize (analiz sonrası yeniden ağırlıklandırma) atıfta bulunabilir. Engelli bir A/B testinde, maruz kalmadan önce her blok içinde rastgeleleştirme gerçekleşir. Tabakalı bir analizde, bloklama yapmadan rastgeleleştirmiş olabilirsiniz ancak analiz sonrası tabakaya göre yeniden ağırlıklandırabilir veya ayarlayabilirsiniz. Tasarım zamanında bloklama, analiz zamanında tabakalaşmadan genellikle daha güçlüdür.
Hangi değişkenleri bloklayacağımı nasıl seçerim?
Şunlar olan değişkenlere blok yapın: (1) tedavi atamadan önce ölçebileceğiniz, (2) birincil sonuç metriği ile ilişkili olması beklenen ve (3) tedavinin kendisi tarafından neden olunmayan değişkenler. Çevrimiçi deneylerde yaygın seçimler arasında cihaz türü, kullanıcı süresi kohortu ve coğrafi bölge bulunur. Yeterli blok boyutlarını korumak için yeterince büyük olmadıkça, çok sayıda kategorisi olan değişkenlere blok yapmaktan kaçının.
Bloklama örneklem boyutu gereksinimini değiştirir mi?
Bloklama, bloklama değişkeninden kaynaklanan varyansı hata teriminden çıkardığı için, belirli bir güç seviyesine ulaşmak için gereken örneklem boyutunu azaltabilir. Verimlilik kazancı, bloklama değişkeninin sonuca ne kadar güçlü bir şekilde bağlı olduğuna bağlıdır. Korelasyon düşükse, bloklama çok az fayda sağlar ve basit bir A/B testi daha az analitik kaynak gerektirebilir.
İkiden fazla varyantla engelli bir tasarım kullanabilir miyim?
Evet. İkiden fazla koşul olduğunda tasarıma engelli çok kollu deney veya birden fazla tedavi ile rastgele tam blok tasarımı denir. Her blok içindeki birimler, k koşuldan birine rastgele atanır. Analiz, blok ve tedavi göstergeleriyle ANOVA veya regresyona genelleştirilir, ardından planlanmış veya analiz sonrası karşılaştırmalar yapılır.
Analizime blok göstergelerini dahil etmeyi unutursam ne olur?
Blok göstergelerini atlamak, bloklamadan elde edilen varyans azaltımının kaybolduğu anlamına gelir. Daha da kötüsü, blok boyutları eşit değilse, naif tahmin yanlı olabilir. Engelli tasarımı onurlandırmak ve verimlilik kazanımlarını geri kazanmak için her zaman istatistiksel modelde blok sabit etkilerini (veya rastgele etkiler terimini) dahil edin.
Kaynaklar
- Fisher, R. A. (1926). The arrangement of field experiments. Journal of the Ministry of Agriculture of Great Britain, 33, 503–513. link ↗
- Kohavi, R., Tang, D., & Xu, Y. (2020). Trustworthy Online Controlled Experiments: A Practical Guide to A/B Testing. Cambridge University Press. ISBN: 9781108724265
Bu sayfayı kaynak gösterin
ScholarGate. (2026, June 3). Blocked A/B Test (Block-Randomized Split Test). ScholarGate. https://scholargate.app/tr/experimental-design/blocked-ab-test
Hangi yöntem?
Bu yöntemi en yakın akrabalarının yanına koyup yan yana okuyun — kütüphane kitapları masaya serer; seçim sizindir.
- Engellenmiş Rastgele Kontrollü Deneme (Engellenmiş RK)Deney tasarımı↔ karşılaştır
- Faktöriyel A/B TestiDeney tasarımı↔ karşılaştır
- Çok Kollu DeneyDeney tasarımı↔ karşılaştır
- Rastgele Kontrollü Deney (RKD)Deney tasarımı↔ karşılaştır