סיווג מבוסס BERT
סיווג מבוסס BERT מבצע fine-tuning למודל Bidirectional Encoder Representations from Transformers של גוגל על מערך נתונים מתויג של טקסטים, תוך החלפת השכבה הגנרית שאומנה מראש בשכבת סיווג ייעודית למשימה. הוא מנצל הקשר דו-כיווני עמוק ממאות מיליוני פרמטרים שאומנו מראש כדי לספק דיוק state-of-the-art במשימות סיווג טקסט קצרות וארוכות-בינוניות, עם כמויות צנועות יחסית של נתונים מתויגים.
קראו את השיטה במלואה
התחברו עם חשבון חינמי כדי לקרוא חלק זה.
Method map
The neighbourhood of related methods — select a node to explore.
+60 more
מקורות
- Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. In Proceedings of NAACL-HLT 2019 (pp. 4171–4186). Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423 ↗
- Sun, C., Qiu, X., Xu, Y., & Huang, X. (2019). How to Fine-Tune BERT for Text Classification? In China National Conference on Chinese Computational Linguistics (CCL 2019), Lecture Notes in Computer Science, vol 11856, pp. 194–206. Springer. DOI: 10.1007/978-3-030-32381-3_16 ↗
איך לצטט עמוד זה
ScholarGate. (2026, June 3). Bidirectional Encoder Representations from Transformers for Text Classification. ScholarGate. https://scholargate.app/he/deep-learning/bert-based-classification
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- Long Short-Term Memory (LSTM)למידה עמוקה↔ compare
- רשת נוירונים רקורנטיתלמידה עמוקה↔ compare
- סיווג מבוסס RoBERTaלמידה עמוקה↔ compare
- ייצוגי משפטים (Sentence Embeddings)למידה עמוקה↔ compare