Machine learningDeep learning / NLP / CV

Classificazione basata su RoBERTa

La classificazione basata su RoBERTa applica il transformer pre-addestrato RoBERTa — addestrato in modo più robusto di BERT con mascheramento dinamico e batch più grandi — a compiti di categorizzazione del testo aggiungendo una testa di classificazione leggera sopra la rappresentazione del token [CLS] e affinando l'intero modello su esempi etichettati. Corrisponde costantemente o supera BERT nei benchmark standard di NLP.

Apri in MethodMindIn arrivoVideoIn arrivoDownload slides

Leggi il metodo completo

Riservato ai membri

Accedi con un account gratuito per leggere questa sezione.

Accedi

Method map

The neighbourhood of related methods — select a node to explore.

Classificazione basata su RoBERTa

Classificazione basata s…Classificazione basata s…Unità Ricorrente con Gat…Long Short-Term Memory (…Sentence Embeddings Classificazione basata s…Question Answering Adatt…Classificazione basata s…Embeddings di frasi adat…Analisi del Sentimento A…

+24 more

Fonti

Liu, Y., Ott, M., Goyal, N., Du, J., Joshi, M., Chen, D., Levy, O., Lewis, M., Zettlemoyer, L., & Stoyanov, V. (2019). RoBERTa: A Robustly Optimized BERT Pretraining Approach. arXiv preprint arXiv:1907.11692. link ↗
Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. In Proceedings of NAACL-HLT 2019 (pp. 4171–4186). Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423 ↗

Come citare questa pagina

ScholarGate. (2026, June 3). RoBERTa-based Text Classification (Robustly Optimized BERT Pretraining Approach). ScholarGate. https://scholargate.app/it/deep-learning/roberta-based-classification

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Classificazione basata su BERTApprendimento profondo↔ compare
Classificazione basata su RoBERTa fine-tunedApprendimento profondo↔ compare
Unità Ricorrente con Gate (GRU)Apprendimento profondo↔ compare
Long Short-Term Memory (LSTM)Apprendimento profondo↔ compare
Sentence EmbeddingsApprendimento profondo↔ compare

Compare side by side →

Citato da

Classificazione basata su BERT Classificazione basata su BERT adattata al dominio Question Answering Adattivo al Dominio Classificazione basata su RoBERTa adattata al dominio Embeddings di frasi adattivi al dominio Analisi del Sentimento Adattiva al Dominio Classificazione basata su BERT Spiegabile Question Answering Spiegabile Classificazione basata su RoBERTa Spiegabile Analisi del Sentimento Spiegabile Classificazione basata su BERT fine-tuned Riconoscimento di Entità Nominate con Fine-Tuning Question Answering Fine-Tuned Classificazione basata su RoBERTa fine-tuned Embeddings di Frase Ottimizzati (Fine-Tuned Sentence Embeddings)Riassunto di Testi con Fine-Tuning Transformer con addestramento fine-tuned Risposta a domande multilingue Classificazione basata su RoBERTa multilingue Analisi Multilingue del Sentimento Transformer multilingue Classificazione Multimodale basata su RoBERTa Transformer auto-supervisionato Classificazione semi-supervisionata basata su BERT Classificazione semi-supervisionata basata su RoBERTa Transformer semi-supervisionato Sentence Embeddings Apprendimento per trasferimento con classificazione basata su BERT Apprendimento per trasferimento con riconoscimento di entità nominate Apprendimento per trasferimento con embedding di frasi Classificazione debolemente supervisionata basata su BERT Classificazione debolmente supervisionata basata su RoBERTa

Hai notato un problema in questa pagina? Segnalalo o proponi una correzione →

Leggi il metodo completo

Method map

Fonti

Come citare questa pagina

Metodi correlati

Which method?

Citato da