RoBERTa-based Classification
RoBERTa-based Classification applies the RoBERTa pre-trained transformer — trained more robustly than BERT with dynamic masking and larger batches — to text categorisation tasks by adding a lightweight classification head on top of the [CLS] token representation and fine-tuning the entire model on labelled examples. It consistently matches or outperforms BERT on standard NLP benchmarks.
Quellendatensatz
Zitate wörtlich aus dem Quellendatensatz der Methode übernommen. Daraus wird keine Überprüfung auf Claim-Ebene abgeleitet.
- Liu, Y., Ott, M., Goyal, N., Du, J., Joshi, M., Chen, D., Levy, O., Lewis, M., Zettlemoyer, L., & Stoyanov, V. (2019). RoBERTa: A Robustly Optimized BERT Pretraining Approach. arXiv preprint arXiv:1907.11692. · URL
- Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. In Proceedings of NAACL-HLT 2019 (pp. 4171–4186). Association for Computational Linguistics. · DOI 10.18653/v1/N19-1423
Kuratiert Claims
Claims im Evidenz-Ledger gespeichert, jeder mit seiner eigenen Bewertung.
Diese Ansicht erfindet keine Claim-Bewertung, wenn das Ledger keine hat.
Verwandte Methoden
Generiert aus dem Methoden-Graphen und als maschinell vorgeschlagene Beziehungen angezeigt – es wird kein Evidenz-Claim abgeleitet.