ScholarGate
Assistent
Machine learningDeep learning / NLP / CV

Multilingual Transformer

Multilingual transformer onниками on Transformer-arhitektuuril põhinev eelkoolitatud keelemudel, mida on treenitud ühiselt kümnete kuni üle saja keele tekstiga. Mudelid nagu mBERT ja XLM-RoBERTa õpivad jagatud risti-keelelisi representatsioone, võimaldades null- või väheste võtete ülekannet: ingliskeelse andmestikuga peenhäälestatud mudelit saab sageli rakendada otse prantsuse, saksa, araabia või hiina keelele ilma keelespetsiifiliste siltideta.

Ava rakenduses MethodMindPeagiVideoPeagiDownload slides

Loe meetodi täielikku kirjeldust

Ainult liikmetele

Selle osa lugemiseks logi sisse tasuta kontoga.

Logi sisse

Method map

The neighbourhood of related methods — select a node to explore.

+10 more

Allikad

  1. Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. Proceedings of NAACL-HLT 2019, pp. 4171–4186. Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423
  2. Conneau, A., Khandelwal, K., Goyal, N., Chaudhary, V., Wenzek, G., Guzmán, F., Grave, E., Ott, M., Zettlemoyer, L., & Stoyanov, V. (2020). Unsupervised Cross-lingual Representation Learning at Scale. Proceedings of ACL 2020, pp. 8440–8451. Association for Computational Linguistics. DOI: 10.18653/v1/2020.acl-main.747

Kuidas sellele lehele viidata

ScholarGate. (2026, June 3). Multilingual Transformer (Cross-lingual Pre-trained Language Model). ScholarGate. https://scholargate.app/et/deep-learning/multilingual-transformer

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

Sellele viitavad

ScholarGateMultilingual Transformer (Multilingual Transformer (Cross-lingual Pre-trained Language Model)). Loetud 2026-06-15 aadressilt https://scholargate.app/et/deep-learning/multilingual-transformer · Andmestik: https://doi.org/10.5281/zenodo.20539026