MCDMInformation-theoretic divergence
تباعد كولباك-لايبلر
يقيس تباعد كولباك-لايبلر، المعروف أيضًا بالإنتروبيا النسبية أو تباعد المعلومات، الفرق غير المتماثل بين توزيعين احتماليين. قدمه سولومون كولباك وريتشارد ليبلر في عام 1951، ويحدد هذا المقياس النظري للمعلومات مدى تباعد توزيع احتمالي عن توزيع مرجعي، ويتراوح من 0 (توزيعات متطابقة) إلى ما لا نهاية. وهو أساسي في نظرية المعلومات، والتعلم الآلي، واتخاذ القرارات ذات الأطر الاحتمالية.
اقرأ الطريقة كاملة
للأعضاء فقط
تسجيل الدخولسجّل الدخول بحساب مجاني لقراءة هذا القسم.
خريطة المناهج
محيط المناهج ذات الصلة — اختر عقدةً للاستكشاف.
المصادر
- Kullback, S., & Leibler, R. A. (1951). On information and sufficiency. Annals of Mathematical Statistics, 22(1), 79-86. DOI: 10.1214/aoms/1177729694 ↗
- Cover, T. M., & Thomas, J. A. (1991). Elements of Information Theory. Wiley-Interscience. DOI: 10.1002/0471200611 ↗
كيف تستشهد بهذه الصفحة
ScholarGate. (2026, June 3). Kullback-Leibler Information Divergence. ScholarGate. https://scholargate.app/ar/decision-making/kullback-leibler-divergence
أيُّ منهج؟
ضع هذا المنهج إلى جانب أقرب نظائره واقرأهما جنباً إلى جنب — المكتبة تضع الكتب على الطاولة، والاختيار لك.
- مسافة هيلينجراتخاذ القرار↔ قارن
- تباعد جنسن-شانون (Jensen-Shannon divergence)اتخاذ القرار↔ قارن