Zayıf Bilgilendirici ve Düzenleyici Önsel Dağılımlar
Zayıf bilgilendirici önsel dağılımlar, akla yatkın olmayan parametre değerlerini dışlayan ve güçlü esaslı inançlar dayatmadan tahminleri stabilize eden, kasıtlı olarak ılımlı ve uygun önsel dağılımlardır.
Tanım
Zayıf bilgilendirici bir önsel dağılım, akla yatkın parametre değerleri ölçeğinde geniş olacak şekilde seçilen uygun bir önsel dağılımdır; bu, sonsal dağılımı düzenlemek ve hesaplamayı iyileştirmek için yeterli bilgi sağlarken, o aralıktaki belirli bir değere bağlı kalmamaktadır.
Kapsam
Bu konu, düz önsel dağılımlara kıyasla zayıf bilgilendirici önsel dağılımların gerekçesini, bunların düzenleyici ve büzülme (shrinkage) etkilerini, regresyon katsayıları ve ölçek parametreleri için varsayılan seçimleri ve at nalı (horseshoe) ile Bayesçi Lasso gibi seyreklik indükleyici önsel dağılımları kapsamaktadır.
Temel sorular
- Uygulamada neden zayıf bilgilendirici önsel dağılımlar, düz veya uygunsuz önsel dağılımlara tercih edilmektedir?
- Önsel dağılımlar tahminleri nasıl düzenler ve onları akla yatkın değerlere doğru nasıl büzüştürür?
- Regresyon katsayıları ve varyans parametreleri için hangi varsayılan önsel dağılımlar önerilmektedir?
- At nalı (horseshoe) gibi seyreklik önsel dağılımları, potansiyel olarak sıfır olan birçok katsayıyı nasıl ele almaktadır?
Anahtar kavramlar
- zayıf bilgilendirici önsel dağılım
- düzenleme (regularization)
- büzülme (shrinkage)
- at nalı (horseshoe) önsel dağılımı
- Bayesçi Lasso
- ölçek önsel dağılımı
- ayrılma (separation)
Temel kuramlar
- Önsel dağılımlar aracılığıyla düzenleme
- Sonlu ölçekli bir önsel dağılım, aşırı tahminleri cezalandırarak varyansı azaltır ve ayrılma (separation) problemlerini önler; birçok cezalandırılmış olabilirlik tahmincisi, belirli önsel dağılımlar altında sonsal modlara karşılık gelmektedir.
- Küresel-yerel büzülme (shrinkage)
- At nalı (horseshoe) gibi seyreklik önsel dağılımları, küçük katsayıların güçlü bir şekilde büzülmesini sağlarken, büyük sinyallerin büzülmeden kaçmasını sağlamak için ağır kuyruklu bir yerel ölçek ve küresel bir ölçek kullanmaktadır.
Klinik önem
Düzenleyici önsel dağılımlar, genomik ve biyobelirteç seçimi gibi yüksek boyutlu ve seyrek problemlerde tahminleri stabilize etmekte ve verilerin parametreleri yalnızca zayıf bir şekilde tanımladığı durumlarda ıraksak tahminleri önlemektedir.
Tarihçe
2000'li yıllarda Bayesçi hesaplamanın rutin hale gelmesiyle birlikte, dikkat, düz 'bilgilendirici olmayan' önsel dağılımlardan, hem çıkarımı hem de örneklemeyi iyileştiren zayıf bilgilendirici varsayılanlara kaymıştır. Bayesçi Lasso ve 2010 at nalı (horseshoe) tahmincisi dahil olmak üzere seyreklik önsel dağılımları, bu düşünceyi yüksek boyutlu regresyona genişletmiştir.
Tartışmalar
- Varsayılan bir önsel dağılım ne kadar zayıf olmalıdır?
- Zayıf bilgilendirici önsel dağılımların ölçeğinin, ilgili ölçekte sonuçları istemeden saptırmadan faydalı bir şekilde düzenleme yapacak şekilde nasıl ayarlanacağı konusunda devam eden bir tartışma bulunmaktadır.
Öne çıkan isimler
- Andrew Gelman
- Nicholas Polson
- James Scott
- Carlos Carvalho
İlgili konular
Temel eserler
- gelman2008
- carvalho2010
Sıkça sorulan sorular
- Zayıf bilgilendirici bir önsel dağılım, bilgilendirici olmayan bir önsel dağılımdan nasıl farklıdır?
- Bilgilendirici olmayan bir önsel dağılım mümkün olduğunca az bilgi eklemeye çalışır ve uygunsuz olabilirken, zayıf bilgilendirici bir önsel dağılım uygun olup, akla yatkın olmayan değerleri dışlamak ve analizi stabilize etmek için kasıtlı olarak ılımlı bilgi eklemektedir.