इस प्रोजेक्ट के बारे में
Muzic माइक्रोसॉफ्ट रिसर्च एशिया का एक शोध प्रोजेक्ट है जो संगीत समझ और निर्माण के लिए डीप-लर्निंग सिस्टम के एक परिवार को एकत्र करता है। यह रिपॉजिटरी अलग-अलग उप-प्रोजेक्ट्स से जुड़ने के लिए एक हब के रूप में कार्य करती है, जिनमें से प्रत्येक का अपना README, कोड और पेपर संदर्भ है।
समझ पक्ष पर, Muzic में बड़े पैमाने पर प्री-ट्रेनिंग के माध्यम से प्रतीकात्मक संगीत समझ के लिए MusicBERT, स्वचालित गीत प्रतिलेखन में पिच-और-अवधि डेटा संवर्धन के लिए PDAugment, और CLaMP शामिल है, जो क्रॉस-मोडल प्रतीकात्मक संगीत सूचना पुनर्प्राप्ति के लिए एक कंट्रास्टिव भाषा-संगीत प्री-ट्रेनिंग मॉडल है (ISMIR 2023 में सर्वश्रेष्ठ छात्र पेपर पुरस्कार का विजेता)।
निर्माण पक्ष पर, यह प्रोजेक्ट गीत लेखन (गीत-से-धुन और धुन-से-गीत के लिए SongMASS, तुकबंदी और लय मॉडलिंग के साथ रैप निर्माण के लिए DeepRapper, TeleMelody, ReLyMe, और गीत-से-धुन के लिए Re-creation of Creations), संगीत रूप और संरचना मॉडलिंग (MeloForm और Museformer), मल्टी-ट्रैक निर्माण (संगत के लिए PopMAG और एकीकृत प्रतिनिधित्व और प्रसार ढांचे के माध्यम से किसी भी ट्रैक निर्माण के लिए GETMusic), टेक्स्ट-से-संगीत रचना (MuseCoco), और गायन आवाज संश्लेषण (HiFiSinger) को कवर करता है। MusicAgent बहुमुखी संगीत प्रसंस्करण के लिए एक LLM-आधारित AI एजेंट है।
यह प्रोजेक्ट Linux-उन्मुख है, Ubuntu 16.04.6 LTS पर CUDA 10 और Python 3.6.12 के साथ परीक्षण किया गया है, और निर्भरताएँ requirements.txt में सूचीबद्ध हैं। प्रत्येक उप-प्रोजेक्ट फ़ोल्डर में विस्तृत उपयोग निर्देश होते हैं, और उत्पन्न संगीत नमूने प्रोजेक्ट वेबसाइट पर प्रदर्शित किए जाते हैं। Muzic एक योगदानकर्ता लाइसेंस समझौते और माइक्रोसॉफ्ट के ओपन सोर्स आचार संहिता के तहत योगदान का स्वागत करता है।
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.