Transformer (NLP)
El Transformer és un model d'aprenentatge profund basat en l'atenció, introduït per Vaswani i col·laboradors el 2017, que realitza classificació de text, reconeixement d'entitats nomenades i modelatge del llenguatge permetent que cada testimoni (token) en una seqüència atengui directament a cada altre testimoni. Va substituir dissenys recurrents anteriors amb un mecanisme d'autoatenció que processa seqüències senceres en paral·lel.
Llegeix el mètode complet
Inicia la sessió amb un compte gratuït per llegir aquesta secció.
Method map
The neighbourhood of related methods — select a node to explore.
Fonts
- Vaswani, A. et al. (2017). Attention Is All You Need. NeurIPS. link ↗
Com citar aquesta pàgina
ScholarGate. (2026, June 1). Transformer Model for Natural Language Processing. ScholarGate. https://scholargate.app/ca/deep-learning/transformer-nlp
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- AutoencoderAprenentatge profund↔ compare
- Regressió LogísticaEstadística per a la recerca↔ compare
- Random ForestAprenentatge automàtic↔ compare
- XGBoostAprenentatge automàtic↔ compare
Citat per
Has vist cap problema en aquesta pàgina? Informa'n o suggereix una correcció →