इस प्रोजेक्ट के बारे में

इस रिपॉजिटरी में NLP प्रयोगों और कार्यान्वयनों की एक श्रृंखला शामिल है। मुख्य क्षमताओं में शामिल हैं: - Word Vector Models: Continuous Bag of Words (CBOW) और Skip-gram के कार्यान्वयन, जिनमें ट्रेनिंग स्क्रिप्ट और उदाहरण जनरेटर शामिल हैं। - Text Processing: टोकनाइज़ेशन, शब्दावली मैपिंग और BNC corpus से डेटा पढ़ने के लिए उपकरण। - Classical NLP: Jurafsky और Martin अभ्यासों पर आधारित tf-idf एल्गोरिदम और n-gram टेबल निर्माण/जेनरेशन का कार्यान्वयन। - Advanced Models: PyTorch का उपयोग करके Transformer मॉडल का एक ट्यूटोरियल कार्यान्वयन और distance-dependent Chinese Restaurant Process (CRP) का कार्यान्वयन। - Utility: कमांड-लाइन इंटरफेस वाले प्रोग्रामों को व्यवस्थित करने के लिए एक command-pattern फ्रेमवर्क।