ডোমেইন-অ্যাডাপ্টিভ BERT-ভিত্তিক ক্লাসিফিকেশন
ডোমেইন-অ্যাডাপ্টিভ BERT-ভিত্তিক ক্লাসিফিকেশন স্ট্যান্ডার্ড ফাইন-টিউনিং পাইপলাইনকে প্রসারিত করে, প্রথমে BERT-এর মাস্কড-ল্যাঙ্গুয়েজ-মডেল প্রি-ট্রেনিংকে ডোমেইন-নির্দিষ্ট লেবেলবিহীন টেক্সটের একটি বৃহৎ কর্পাসে চালিয়ে, তারপর টার্গেট ক্লাসিফিকেশন টাস্কের জন্য লেবেলযুক্ত উদাহরণগুলির উপর মডেলটিকে ফাইন-টিউন করে। এই দ্বি-স্তরীয় পদ্ধতি BERT-এর সাধারণ প্রি-ট্রেনিং কর্পাস এবং বায়োমেডিসিন, আইন, অর্থ, বা সোশ্যাল-মিডিয়া টেক্সটের মতো বিশেষায়িত ডোমেইনগুলির মধ্যে শব্দভাণ্ডার এবং ডিস্ট্রিবিউশনাল ব্যবধান পূরণ করে।
পুরো পদ্ধতিটি পড়ুন
এই অংশটি পড়তে বিনামূল্যের অ্যাকাউন্ট দিয়ে সাইন ইন করুন।
Method map
The neighbourhood of related methods — select a node to explore.
+4 more
উৎস
- Gururangan, S., Marasovic, A., Swayamdipta, S., Lo, K., Beltagy, I., Downey, D., & Smith, N. A. (2020). Don't Stop Pretraining: Adapt Language Models to Domains and Tasks. In Proceedings of the 58th Annual Meeting of the Association for Computational Linguistics (ACL 2020), 8342–8360. DOI: 10.18653/v1/2020.acl-main.740 ↗
- Lee, J., Yoon, W., Kim, S., Kim, D., Kim, S., So, C. H., & Kang, J. (2020). BioBERT: a pre-trained biomedical language representation model for biomedical text mining. Bioinformatics, 36(4), 1234–1240. DOI: 10.1093/bioinformatics/btz682 ↗
এই পৃষ্ঠা কীভাবে উদ্ধৃত করবেন
ScholarGate. (2026, June 3). Domain-Adaptive Pre-training with BERT for Text Classification. ScholarGate. https://scholargate.app/bn/deep-learning/domain-adaptive-bert-based-classification
Which method?
Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.
- BERT-ভিত্তিক শ্রেণিবিভাগগভীর শিখন↔ compare
- ডোমেইন-অ্যাডাপ্টিভ ট্রান্সফরমারগভীর শিখন↔ compare
- ফাইন-টিউনড BERT-ভিত্তিক ক্লাসিফিকেশনগভীর শিখন↔ compare
- RoBERTa-ভিত্তিক শ্রেণিবিভাগগভীর শিখন↔ compare
- বাক্য এমবেডিংগভীর শিখন↔ compare
- BERT-ভিত্তিক শ্রেণিবিভাগ সহ ট্রান্সফার লার্নিংগভীর শিখন↔ compare
যেখানে উদ্ধৃত
এই পৃষ্ঠায় কোনো ত্রুটি চোখে পড়েছে? জানান বা সংশোধনের প্রস্তাব দিন →