প্রকল্প সম্পর্কে

Muzic হলো Microsoft Research Asia-এর একটি গবেষণা প্রকল্প, যা সঙ্গীত বোঝা এবং তৈরির জন্য গভীর-শিক্ষা ব্যবস্থার একটি পরিবার সংগ্রহ করে। রিপোজিটরিটি একটি হাব হিসেবে কাজ করে, যা প্রতিটি পৃথক সাবপ্রজেক্টের সাথে সংযুক্ত, যার প্রতিটির নিজস্ব README, কোড এবং গবেষণাপত্রের রেফারেন্স রয়েছে। বোঝার দিক থেকে, Muzic-এ রয়েছে MusicBERT, যা বড় আকারের প্রাক-প্রশিক্ষণের মাধ্যমে প্রতীকী সঙ্গীত বোঝার জন্য; PDAugment, যা স্বয়ংক্রিয় গানের কথা প্রতিলিপিতে পিচ এবং সময়কালের ডেটা বৃদ্ধির জন্য; এবং CLaMP, যা ক্রস-মোডাল প্রতীকী সঙ্গীত তথ্য পুনরুদ্ধারের জন্য একটি কনট্রাস্টিভ ভাষা-সঙ্গীত প্রাক-প্রশিক্ষণ মডেল (ISMIR 2023-এ সেরা ছাত্র গবেষণাপত্র পুরস্কার বিজয়ী)। তৈরির দিক থেকে, প্রকল্পটি গান লেখা (গানের কথা থেকে সুর এবং সুর থেকে গানের কথা তৈরির জন্য SongMASS, ছন্দ ও তাল মডেলিং সহ র্যাপ তৈরির জন্য DeepRapper, গানের কথা থেকে সুর তৈরির জন্য TeleMelody, ReLyMe এবং Re-creation of Creations), সঙ্গীতের রূপ ও কাঠামো মডেলিং (MeloForm এবং Museformer), মাল্টি-ট্র্যাক তৈরি (সঙ্গীতের জন্য PopMAG এবং একটি ঐক্যবদ্ধ উপস্থাপনা ও ডিফিউশন কাঠামোর মাধ্যমে যেকোনো ট্র্যাক তৈরির জন্য GETMusic), টেক্সট থেকে সঙ্গীত রচনা (MuseCoco), এবং গাওয়ার কণ্ঠ সংশ্লেষণ (HiFiSinger) কভার করে। MusicAgent হলো বহুমুখী সঙ্গীত প্রক্রিয়াকরণের জন্য একটি LLM-ভিত্তিক AI এজেন্ট। প্রকল্পটি লিনাক্স-ভিত্তিক, Ubuntu 16.04.6 LTS-এ CUDA 10 এবং Python 3.6.12 দিয়ে পরীক্ষিত, এবং নির্ভরতাগুলি requirements.txt-এ তালিকাভুক্ত। প্রতিটি সাবপ্রজেক্ট ফোল্ডারে বিস্তারিত ব্যবহারের নির্দেশনা রয়েছে, এবং তৈরি করা সঙ্গীতের নমুনা প্রকল্পের ওয়েবসাইটে প্রদর্শিত হয়। Muzic একটি কন্ট্রিবিউটর লাইসেন্স চুক্তি এবং Microsoft-এর ওপেন সোর্স কোড অফ কন্ডাক্টের অধীনে অবদান স্বাগত জানায়।