Machine learning

ترنسفورمر (پردازش زبان طبیعی)

ترنسفورمر مدلی یادگیری عمیق مبتنی بر توجه است که توسط واسوانی و همکارانش در سال ۲۰۱۷ معرفی شد و با اجازه دادن به هر توکن در یک توالی برای توجه مستقیم به هر توکن دیگر، وظایف طبقه‌بندی متن، تشخیص موجودیت نام‌دار و مدل‌سازی زبان را انجام می‌دهد. این مدل با مکانیزم توجه به خود (self-attention) که کل توالی‌ها را به صورت موازی پردازش می‌کند، جایگزین طرح‌های بازگشتی قبلی شد.

باز کردن در MethodMindبه‌زودیویدیوبه‌زودیDownload slides

مطالعهٔ کامل روش

ویژهٔ اعضا

برای خواندن این بخش با حساب رایگان وارد شوید.

ورود

Method map

The neighbourhood of related methods — select a node to explore.

منابع

  1. Vaswani, A. et al. (2017). Attention Is All You Need. NeurIPS. link

نحوهٔ استناد به این صفحه

ScholarGate. (2026, June 1). Transformer Model for Natural Language Processing. ScholarGate. https://scholargate.app/fa/deep-learning/transformer-nlp

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

ارجاع‌شده در

ScholarGateTransformer (Transformer Model for Natural Language Processing). بازیابی‌شده در 2026-06-15 از https://scholargate.app/fa/deep-learning/transformer-nlp · مجموعه‌داده: https://doi.org/10.5281/zenodo.20539026