Machine learning

T5 (টেক্সট-টু-টেক্সট ট্রান্সফার ট্রান্সফরমার)

T5 হল একটি সমন্বিত সিকোয়েন্স-টু-সিকোয়েন্স ডিপ লার্নিং ফ্রেমওয়ার্ক যা গুগল ব্রেইনের রাফেল এট আল. (Raffel et al.) ২০২০ সালে প্রবর্তন করেন এবং জার্নাল অফ মেশিন লার্নিং রিসার্চ (Journal of Machine Learning Research) (ভলিউম ২১, নং ১৪০) এ প্রকাশিত হয়। এটি প্রতিটি এনএলপি (NLP) কাজকে — শ্রেণীকরণ, অনুবাদ, সারসংক্ষেপকরণ, প্রশ্ন-উত্তর এবং আরও অনেক কিছুকে — একটি টেক্সট-টু-টেক্সট সমস্যা হিসেবে পুনর্গঠন করে: ইনপুট এবং আউটপুট উভয়ই সর্বদা ক্যারেক্টার স্ট্রিং হয়, যা একটি একক এনকোডার-ডিকোডার ট্রান্সফরমারকে একবার প্রি-ট্রেইন করতে এবং একটি সুসংগত ইন্টারফেসের মাধ্যমে বিভিন্ন কাজে ফাইন-টিউন করতে সক্ষম করে। T5 স্প্যান-করাপশন প্রি-ট্রেনিং এবং C4 কর্পাস প্রবর্তন করে, এবং এর বৃহত্তম ভেরিয়েন্ট (১১ বিলিয়ন প্যারামিটার) প্রকাশের সময় এনএলপি বেঞ্চমার্কের বিস্তৃত পরিসরে অত্যাধুনিক ফলাফল অর্জন করে।

MethodMind-এ খুলুনশীঘ্রইভিডিওশীঘ্রইDownload slides

পুরো পদ্ধতিটি পড়ুন

শুধু সদস্যদের জন্য

এই অংশটি পড়তে বিনামূল্যের অ্যাকাউন্ট দিয়ে সাইন ইন করুন।

সাইন ইন করুন

Method map

The neighbourhood of related methods — select a node to explore.

T5 (টেক্সট-টু-টেক্সট ট্রান্সফার ট্রান্সফরমার)
অ্যাটেনশন মেকানিজমট্রান্সফার লার্নিং

উৎস

  1. Raffel, C., Shazeer, N., Roberts, A., Lee, K., Narang, S., Matena, M., Zhou, Y., Li, W., & Liu, P. J. (2020). Exploring the Limits of Transfer Learning with a Unified Text-to-Text Transformer. Journal of Machine Learning Research, 21(140), 1–67. link
  2. Vaswani, A., Shazeer, N., Parmar, N., Uszkoreit, J., Jones, L., Gomez, A. N., Kaiser, Ł., & Polosukhin, I. (2017). Attention is All You Need. Advances in Neural Information Processing Systems, 30. link
  3. Devlin, J., Chang, M.-W., Lee, K., & Toutanova, K. (2019). BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding. Proceedings of NAACL-HLT 2019, 4171–4186. link

এই পৃষ্ঠা কীভাবে উদ্ধৃত করবেন

ScholarGate. (2026, June 3). T5: Exploring the Limits of Transfer Learning with a Unified Text-to-Text Transformer. ScholarGate. https://scholargate.app/bn/deep-learning/t5

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side
ScholarGateT5 (Text-to-Text Transfer Transformer) (T5: Exploring the Limits of Transfer Learning with a Unified Text-to-Text Transformer). 2026-06-15 তারিখে সংগৃহীত, উৎস: https://scholargate.app/bn/deep-learning/t5 · ডেটাসেট: https://doi.org/10.5281/zenodo.20539026