Трансформер (НЛП)
Трансформер — це модель глибокого навчання на основі механізму уваги, представлена Васувані та колегами у 2017 році, яка виконує класифікацію тексту, розпізнавання іменованих сутностей та моделювання мови, дозволяючи кожному токену в послідовності безпосередньо звертати увагу на кожен інший токен. Вона замінила попередні рекурентні архітектури механізмом самостійної уваги, який обробляє цілі послідовності паралельно.
Читати метод повністю
Увійдіть із безкоштовним обліковим записом, щоб прочитати цей розділ.
Method map
The neighbourhood of related methods — select a node to explore.
Джерела
- Vaswani, A. et al. (2017). Attention Is All You Need. NeurIPS. link ↗
Як цитувати цю сторінку
ScholarGate. (2026, June 1). Transformer Model for Natural Language Processing. ScholarGate. https://scholargate.app/uk/deep-learning/transformer-nlp
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- АвтокодувальникГлибоке навчання↔ compare
- Логістична регресіяСтатистика досліджень↔ compare
- Випадковий лісМашинне навчання↔ compare
- XGBoostМашинне навчання↔ compare
Згадується в
Помітили помилку на цій сторінці? Повідомте про неї або запропонуйте виправлення →