Process / pipeline

ভাষা শনাক্তকরণ (LID)

ভাষা শনাক্তকরণ একটি প্রাকৃতিক ভাষা প্রক্রিয়াকরণ (natural-language-processing) কার্য যা স্বয়ংক্রিয়ভাবে সনাক্ত করে যে কোনও লেখা কোন ভাষায় লেখা হয়েছে। langid.py (Lui & Baldwin, 2012) এবং Joulin et al. (2017) এর কার্যকর শ্রেণীবিভাগকারীর (classifiers) মতো সহজলভ্য সরঞ্জামগুলির উপর ভিত্তি করে, এটি বহুভাষিক ডেটাসেটগুলির প্রিপ্রসেসিং এবং ফিল্টার করার জন্য ব্যাপকভাবে ব্যবহৃত হয়।

MethodMind-এ খুলুনশীঘ্রইভিডিওশীঘ্রইDownload slides

পুরো পদ্ধতিটি পড়ুন

শুধু সদস্যদের জন্য

এই অংশটি পড়তে বিনামূল্যের অ্যাকাউন্ট দিয়ে সাইন ইন করুন।

সাইন ইন করুন

Method map

The neighbourhood of related methods — select a node to explore.

উৎস

  1. Lui, M. & Baldwin, T. (2012). langid.py: An Off-the-shelf Language Identification Tool. Proceedings of the ACL 2012 System Demonstrations. link
  2. Joulin, A., Grave, E., Bojanowski, P. & Mikolov, T. (2017). Bag of Tricks for Efficient Text Classification. Proceedings of the EACL 2017. link

এই পৃষ্ঠা কীভাবে উদ্ধৃত করবেন

ScholarGate. (2026, June 1). Language Identification (LID). ScholarGate. https://scholargate.app/bn/text-mining/language-identification

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

যেখানে উদ্ধৃত

ScholarGateLanguage Identification (Language Identification (LID)). 2026-06-15 তারিখে সংগৃহীত, উৎস: https://scholargate.app/bn/text-mining/language-identification · ডেটাসেট: https://doi.org/10.5281/zenodo.20539026