ScholarGate
सहायक
Process / pipeline

भाषा पहचान (LID)

भाषा पहचान एक प्राकृतिक-भाषा-प्रसंस्करण कार्य है जो स्वचालित रूप से यह पता लगाता है कि कोई पाठ किस भाषा में लिखा गया है। langid.py (Lui & Baldwin, 2012) जैसे ऑफ-द-शेल्फ उपकरणों और Joulin et al. (2017) के कुशल क्लासिफायर पर आधारित, इसका व्यापक रूप से बहुभाषी डेटा सेट को प्रीप्रोसेस और फ़िल्टर करने के लिए उपयोग किया जाता है।

MethodMind में खोलेंजल्द हीवीडियोजल्द हीDownload slides

पूरी विधि पढ़ें

केवल सदस्यों के लिए

यह खंड पढ़ने के लिए निःशुल्क खाते से साइन इन करें।

साइन इन करें

Method map

The neighbourhood of related methods — select a node to explore.

स्रोत

  1. Lui, M. & Baldwin, T. (2012). langid.py: An Off-the-shelf Language Identification Tool. Proceedings of the ACL 2012 System Demonstrations. link
  2. Joulin, A., Grave, E., Bojanowski, P. & Mikolov, T. (2017). Bag of Tricks for Efficient Text Classification. Proceedings of the EACL 2017. link

इस पृष्ठ का उद्धरण कैसे दें

ScholarGate. (2026, June 1). Language Identification (LID). ScholarGate. https://scholargate.app/hi/text-mining/language-identification

Which method?

Set this method beside its closest kin and read them side by side — the library lays the books on the table; the choice is yours.

Compare side by side

इनमें संदर्भित

ScholarGateLanguage Identification (Language Identification (LID)). 2026-06-15 को यहाँ से प्राप्त https://scholargate.app/hi/text-mining/language-identification · डेटासेट: https://doi.org/10.5281/zenodo.20539026