Machine learning

Нормалізація батча

Нормалізація батча (Batch Normalization) — це техніка навчання, представлена Сергієм Йоффе та Крістіаном Шегеді у 2015 році, яка нормалізує вихідні дані перед активацією кожного шару, використовуючи середнє значення та дисперсію, обчислені для поточного міні-батча. Стабілізуючи розподіл вхідних даних для кожного шару протягом навчання, вона суттєво зменшує внутрішній зсув коваріати (internal covariate shift), дозволяючи використовувати вищі швидкості навчання та роблячи глибокі мережі швидшими та надійнішими.

Відкрити у MethodMindНезабаромВідеоНезабаромDownload slides

Читати метод повністю

Лише для учасників

Увійдіть із безкоштовним обліковим записом, щоб прочитати цей розділ.

Увійти

Method map

The neighbourhood of related methods — select a node to explore.

Нормалізація батча
DropoutAlexNetSGD with Momentum / Adam…

Джерела

  1. Ioffe, S. & Szegedy, C. (2015). Batch Normalization: Accelerating Deep Network Training by Reducing Internal Covariate Shift. Proceedings of the 32nd International Conference on Machine Learning (ICML), PMLR 37, 448–456. link
  2. Goodfellow, I., Bengio, Y. & Courville, A. (2016). Deep Learning (Ch. 8). MIT Press. ISBN: 978-0-262-03561-3
  3. Ioffe, S. & Szegedy, C. (2015). Batch Normalization: Accelerating Deep Network Training by Reducing Internal Covariate Shift. arXiv preprint arXiv:1502.03167. link

Як цитувати цю сторінку

ScholarGate. (2026, June 3). Batch Normalization (Normalizing Layer Activations per Mini-Batch). ScholarGate. https://scholargate.app/uk/deep-learning/batch-normalization

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Згадується в

ScholarGateBatch Normalization (Batch Normalization (Normalizing Layer Activations per Mini-Batch)). Отримано 2026-06-15 з https://scholargate.app/uk/deep-learning/batch-normalization · Набір даних: https://doi.org/10.5281/zenodo.20539026