منصوبے کے بارے میں

《动手学大模型 Dive into LLMs》 ایک سیریز پروگرامنگ پریکٹس ٹیوٹوریل ہے جو شنگھائی جیاؤتونگ یونیورسٹی کے کورسز 《قدرتی زبان پروسیسنگ کی جدید ٹیکنالوجیز》 (NIS8021) اور 《مصنوعی ذہانت سیکیورٹی ٹیکنالوجی》 (NIS3353) کے لیکچر نوٹس سے توسیع دی گئی ہے۔ اسے پروفیسر ژانگ ژوو شینگ کی ٹیم نے تیار کیا ہے اور یہ غیر منافع بخش اور مکمل طور پر مفت ہے۔ اس پروجیکٹ کا مقصد آسان مشقوں کے ذریعے سیکھنے والوں کو بڑے لینگویج ماڈلز میں تیزی سے داخل ہونے میں مدد فراہم کرنا ہے تاکہ وہ کورس ڈیزائن یا علمی تحقیق کو بہتر طریقے سے آگے بڑھا سکیں۔ ٹیوٹوریل میں کل 11 ابواب شامل ہیں، ہر باب میں سلائیڈز (PDF)، ٹیوٹوریل وضاحت (README) اور قابل عمل Jupyter Notebook اسکرپٹس فراہم کیے گئے ہیں: 1. فائن ٹیوننگ اور ڈیپلائمنٹ: ماڈل انتخاب، مخصوص ٹاسک فائن ٹیوننگ اور ڈیمو ڈیپلائمنٹ کا احاطہ کرنے والا پری ٹرینڈ ماڈل فائن ٹیوننگ اور ڈیپلائمنٹ گائیڈ۔ 2. پرامپٹ لرننگ اور چین آف تھاٹ: بڑے لینگویج ماڈل API کالنگ اور ریزننگ گائیڈ، پرامپٹ انجینئرنگ اور چین آف تھاٹ ٹیکنالوجی کی تلاش۔ 3. نالج ایڈیٹنگ: زبان کے ماڈلز میں مخصوص علم کی ایڈیٹنگ اور تصدیق کے طریقے اور ٹولز۔ 4. ریاضی استدلال: ڈسٹلیشن کے ذریعے منی R1 ماڈل بنا کر بڑے لینگویج ماڈلز کو ریاضی استدلال کی صلاحیت سکھانا۔ 5. ماڈل واٹر مارکنگ: زبان کے ماڈل کے تخلیق کردہ مواد میں انسانی آنکھ سے پوشیدہ واٹر مارک ایمبیڈ کرنے کی ٹیکنالوجی۔ 6. جیلبریک اٹیک: جیلبریک اٹیکس کے ذریعے بڑے لینگویج ماڈلز کی سیکیورٹی رکاوٹوں کو توڑنے کا طریقہ، حملے کے زاویے سے سیکیورٹی کو سمجھنا۔ 7. بڑے ماڈل سٹیگنوگرافی: بڑے لینگویج ماڈلز کو روانی سے جواب دیتے ہوئے پوشیدہ معلومات لے جانے کی صلاحیت فراہم کرنا جو صرف مخصوص وصول کنندہ پہچان سکتا ہے۔ 8. ملٹی موڈل ماڈلز: یہ دریافت کرنا کہ ملٹی موڈل بڑے لینگویج ماڈلز مضبوط ملٹی موڈل فہم اور جنریشن کی صلاحیتیں کیسے حاصل کرتے ہیں۔ 9. GUI ایجنٹ: AI ایجنٹ کو صارف کے لیے گھر پر کھانا آرڈر کرنے، پیغامات کا جواب دینے، شاپنگ موازنہ وغیرہ GUI آپریشن ٹاسک مکمل کرنے میں مدد کرنا۔ 10. ایجنٹ سیکیورٹی: کھلے ایجنٹ منظرناموں میں بڑے لینگویج ماڈلز کے خطرات اور سیکیورٹی بیداری پر تبادلہ خیال۔ 11. RLHF سیکیورٹی الائنمنٹ: PPO پر مبنی RLHF تجرباتی گائیڈ، جس میں ہیومن فیڈبیک سے تقویت یافتہ لرننگ کے سیکیورٹی الائنمنٹ پریکٹس شامل ہے۔ مزید برآں، اس پروجیکٹ نے ہواوے اسینڈ کمیونٹی کے ساتھ مل کر مقامی 《بڑے ماڈل ڈیولپمنٹ مکمل عمل》 عوامی بہبود کا ٹیوٹوریل بھی جاری کیا ہے، جو اسینڈ بنیادی سافٹ ویئر اور ہارڈ ویئر پر مبنی ہے، اور PPT، تجرباتی دستاویزات اور ویڈیوز جیسی ٹیوٹوریل فارمیٹس کو کور کرتا ہے، جسے ابتدائی، انٹرمیڈیٹ اور ایڈوانسڈ سیریز میں تقسیم کیا گیا ہے، مختلف بڑے ماڈل پریکٹس کی ضروریات کے لیے، تیزی سے شروع سے لے کر اسینڈ سپورٹڈ ماڈلز کے اطلاق اور نئے ماڈلز کی منتقلی اور ٹیوننگ تک مکمل عمل ڈیولپمنٹ گائیڈ فراہم کرتا ہے۔ یہ پروجیکٹ شنگھائی جیاؤتونگ یونیورسٹی، سنگاپور نیشنل یونیورسٹی اور ہواوے اسینڈ کمیونٹی کی متعدد ٹیموں کے اشتراک سے تیار کیا گیا ہے، اور ہم Issue اور PR کے ذریعے بحث اور بہتری میں شرکت کا خیرمقدم کرتے ہیں۔