منصوبے کے بارے میں

اس ریپوزٹری میں NLP کے تجربات اور ان کے نفاذ (implementations) کی ایک سیریز شامل ہے۔ کلیدی صلاحیتوں میں درج ذیل شامل ہیں: - ورڈ ویکٹر ماڈلز: Continuous Bag of Words (CBOW) اور Skip-gram کا نفاذ، جس میں ٹریننگ اسکرپٹس اور ایگزیمپل جنریٹرز شامل ہیں۔ - ٹیکسٹ پروسیسنگ: ٹوکنائزیشن، ووکیبلری میپنگ، اور BNC کورپس سے ڈیٹا پڑھنے کے ٹولز۔ - کلاسک NLP: Jurafsky اور Martin کی مشقوں کی بنیاد پر tf-idf الگورتھم کا نفاذ اور n-gram ٹیبل کی تعمیر/تولید۔ - ایڈوانسڈ ماڈلز: PyTorch کا استعمال کرتے ہوئے Transformer ماڈل کا ایک ٹیوٹوریل نفاذ اور distance-dependent Chinese Restaurant Process (CRP) کا نفاذ۔ - یوٹیلیٹی: کمانڈ لائن انٹرفیسز کے ساتھ پروگراموں کی ساخت کے لیے ایک کمانڈ پیٹرن فریم ورک۔