Klasifikácia založená na BERT
Klasifikácia založená na BERT jemne dolaďuje model Bidirectional Encoder Representations from Transformers od spoločnosti Google na označenom textovom datasete, pričom nahrádza všeobecnú predtrénovanú hlavu klasifikačnou vrstvou špecifickou pre danú úlohu. Využíva hlboký obojsmerný kontext zo stoviek miliónov predtrénovaných parametrov na dosiahnutie špičkovej presnosti pri úlohách klasifikácie krátkych a stredne dlhých textov s relatívne skromným množstvom označených údajov.
Prečítať celú metódu
Ak si chcete prečítať túto sekciu, prihláste sa s bezplatným účtom.
Method map
The neighbourhood of related methods — select a node to explore.
+60 more
Zdroje
- Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. In Proceedings of NAACL-HLT 2019 (pp. 4171–4186). Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423 ↗
- Sun, C., Qiu, X., Xu, Y., & Huang, X. (2019). How to Fine-Tune BERT for Text Classification? In China National Conference on Chinese Computational Linguistics (CCL 2019), Lecture Notes in Computer Science, vol 11856, pp. 194–206. Springer. DOI: 10.1007/978-3-030-32381-3_16 ↗
Ako citovať túto stránku
ScholarGate. (2026, June 3). Bidirectional Encoder Representations from Transformers for Text Classification. ScholarGate. https://scholargate.app/sk/deep-learning/bert-based-classification
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- Long Short-Term Memory (LSTM)Hlboké učenie↔ compare
- Rekurentná neurónová sieťHlboké učenie↔ compare
- Klasifikácia založená na RoBERTaHlboké učenie↔ compare
- Vektorové reprezentácie vietHlboké učenie↔ compare
Odkazujú sem
Našli ste na tejto stránke chybu? Nahláste ju alebo navrhnite opravu →