Machine learningDeep learning / NLP / CV

Klasyfikacja oparta na BERT

Klasyfikacja oparta na BERT polega na dostrajaniu modelu Google Bidirectional Encoder Representations from Transformers (BERT) na oznakowanym zbiorze danych tekstowych, zastępując ogólną, wstępnie wytrenowaną głowicę warstwą klasyfikacyjną specyficzną dla zadania. Wykorzystuje ona głęboki kontekst dwukierunkowy z setek milionów wstępnie wytrenowanych parametrów, aby zapewnić najnowocześniejszą dokładność w zadaniach klasyfikacji tekstów krótkich i średniej długości, przy stosunkowo niewielkich ilościach oznakowanych danych.

Otwórz w MethodMindWkrótceWideoWkrótceDownload slides

Przeczytaj pełny opis metody

Tylko dla członków

Zaloguj się na bezpłatne konto, aby przeczytać tę sekcję.

Zaloguj się

Method map

The neighbourhood of related methods — select a node to explore.

Klasyfikacja oparta na BERT

Długa pamięć krótkotrwał…Rekurencyjna Sieć Neuron…Klasyfikacja oparta na R…Osadzanie zdań Klasyfikacja oparta na d…Nazewnictwo jednostek na…Adaptacyjne odpowiadanie…Adaptacyjna do domeny kl…Osadzone reprezentacje z…Adaptacja domenowa anali…

+60 more

Źródła

Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. In Proceedings of NAACL-HLT 2019 (pp. 4171–4186). Association for Computational Linguistics. DOI: 10.18653/v1/N19-1423 ↗
Sun, C., Qiu, X., Xu, Y., & Huang, X. (2019). How to Fine-Tune BERT for Text Classification? In China National Conference on Chinese Computational Linguistics (CCL 2019), Lecture Notes in Computer Science, vol 11856, pp. 194–206. Springer. DOI: 10.1007/978-3-030-32381-3_16 ↗

Jak cytować tę stronę

ScholarGate. (2026, June 3). Bidirectional Encoder Representations from Transformers for Text Classification. ScholarGate. https://scholargate.app/pl/deep-learning/bert-based-classification

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Długa pamięć krótkotrwała (LSTM)Uczenie głębokie↔ compare
Rekurencyjna Sieć NeuronowaUczenie głębokie↔ compare
Klasyfikacja oparta na RoBERTaUczenie głębokie↔ compare
Osadzanie zdańUczenie głębokie↔ compare

Compare side by side →

Cytowana przez

Klasyfikacja oparta na domenowo adaptowanym modelu BERT Nazewnictwo jednostek nazwanych z adaptacją do domeny Adaptacyjne odpowiadanie na pytania w dziedzinie (DA-QA)Adaptacyjna do domeny klasyfikacja oparta na RoBERTa Osadzone reprezentacje zdań adaptowane do dziedziny Adaptacja domenowa analizy sentymentu Adaptacja domenowa streszczania tekstów Wyjaśnialna klasyfikacja oparta na BERT Wyjaśnialne rozpoznawanie jednostek nazwanych Wyjaśnialne odpowiadanie na pytania Klasyfikacja oparta na modelu RoBERTa z wyjaśnieniem Wyjaśnialne osadzenia zdań Wyjaśnialna analiza sentymentu Wyjaśnialne modelowanie tematów Wyjaśnialny Transformer Klasyfikacja oparta na dostrojonym modelu BERT Dostrojony Doc2Vec Dostrojona sieć LSTM Dostrajanie rozpoznawania jednostek nazewniczych Dostrajanie odpowiedzi na pytania Klasyfikacja oparta na dostrojonym modelu RoBERTa Dostrojone osadzenia zdań Dostrajanie podsumowywania tekstu Dostrajanie modelowania tematów Dostrojony Transformer Dostrojony Vision Transformer Fine-Tuned Word2Vec Gated Recurrent Unit (GRU)Model tematyczny LDA Długa pamięć krótkotrwała (LSTM)Wielojęzyczne odpowiadanie na pytania Klasyfikacja oparta na wielojęzycznym modelu RoBERTa Wielojęzyczne osadzanie zdań Wielojęzyczna analiza sentymentu Wielojęzyczny transformator Wielomodalne rozpoznawanie nazw własnych Odpowiadanie na pytania multimodalne Klasyfikacja multimodalna oparta na modelu RoBERTa Streszczanie multimodalnych tekstów Transformator multimodalny Multimodal Vision Transformer Model tematyczny NMF Rekurencyjna Sieć Neuronowa Klasyfikacja oparta na RoBERTa Samonadzorowany model tematyczny LDA Samonadzorowane osadzanie zdań Samonadzorowane modelowanie tematów Samo-nadzorowany Transformer Klasyfikacja półnadzorowana oparta na BERT Półnadzorowany model tematyczny LDA Półnadzorowane odpowiadanie na pytania Klasyfikacja oparta na półnadzorczym modelu RoBERTa Półnadzorowane osadzanie zdań Półnadzorowana analiza sentymentu Transformery z uczeniem półnadzorowanym Osadzanie zdań Modelowanie tematów Uczenie maszynowe z klasyfikacją opartą na BERT Transfer Learning z LSTM Uczenie transferowe w rozpoznawaniu nazwanych encji Uczenie transferowe z osadzaniem zdań Transfer Learning with Text Summarization Transfer Learning z modelowaniem tematycznym Klasyfikacja BERT oparta na słabym nadzorze Słabo nadzorowane odpowiadanie na pytania Klasyfikacja z użyciem RoBERTa z nadzorem słabym Słabo nadzorowane osadzanie zdań Słabe nadzorowanie modelowania tematów Słabo nadzorowany Transformer Weakly Supervised Word2Vec

Widzisz błąd na tej stronie? Zgłoś go lub zaproponuj poprawkę →

Przeczytaj pełny opis metody

Method map

Źródła

Jak cytować tę stronę

Metody pokrewne

Which method?

Cytowana przez