Monikielinen transformaattori
Monikielinen transformaattori on esikoulutettu kielimalli, joka perustuu transformaattoriarkkitehtuuriin ja on koulutettu samanaikaisesti kymmenistä yli sataan kieleen. Mallit, kuten mBERT ja XLM-RoBERTa, oppivat jaettuja ristikielisiä esitystapoja, jotka mahdollistavat nolla- tai harvan otoksen siirron: englanninkielisellä datalla hienosäädettyä mallia voidaan usein soveltaa suoraan ranskaksi, saksaksi, arabiaksi tai kiinaksi ilman kielikohtaisia tunnisteita.
Lue koko menetelmä
Kirjaudu sisään maksuttomalla tilillä lukeaksesi tämän osion.
Method map
The neighbourhood of related methods — select a node to explore.
+10 more
Lähteet
- Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. Proceedings of NAACL-HLT 2019, pp. 4171–4186. Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423 ↗
- Conneau, A., Khandelwal, K., Goyal, N., Chaudhary, V., Wenzek, G., Guzmán, F., Grave, E., Ott, M., Zettlemoyer, L., & Stoyanov, V. (2020). Unsupervised Cross-lingual Representation Learning at Scale. Proceedings of ACL 2020, pp. 8440–8451. Association for Computational Linguistics. DOI: 10.18653/v1/2020.acl-main.747 ↗
Näin viittaat tähän sivuun
ScholarGate. (2026, June 3). Multilingual Transformer (Cross-lingual Pre-trained Language Model). ScholarGate. https://scholargate.app/fi/deep-learning/multilingual-transformer
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- BERT-pohjainen luokitteluSyväoppiminen↔ compare
- Monikieliset lauseupotuksetSyväoppiminen↔ compare
- RoBERTa-pohjainen luokitteluSyväoppiminen↔ compare
- LauseupotuksetSyväoppiminen↔ compare
Tähän viittaavat
Huomasitko virheen tällä sivulla? Ilmoita siitä tai ehdota korjausta →