প্রকল্প সম্পর্কে
DeepAnalyze চীনের রেনমিন বিশ্ববিদ্যালয় এবং সিংহুয়া বিশ্ববিদ্যালয়ের দল দ্বারা তৈরি, যা স্বায়ত্তশাসিত ডেটা সায়েন্সের জন্য একটি এজেন্টিক লার্জ ল্যাঙ্গুয়েজ মডেল (agentic LLM) হিসেবে অবস্থান করছে। এর লক্ষ্য是人类 হস্তক্ষেপ ছাড়াই ডেটা সায়েন্সের সম্পূর্ণ কর্মপ্রবাহ সম্পন্ন করা, যার মধ্যে রয়েছে ডেটা প্রস্তুতি, বিশ্লেষণ, মডেলিং, ভিজ্যুয়ালাইজেশন এবং রিপোর্ট তৈরি, পাশাপাশি একাধিক ডেটা সোর্সে উন্মুক্ত গভীর গবেষণা সমর্থন করা।
প্রধান ক্ষমতা
- সম্পূর্ণ ডেটা সায়েন্স পাইপলাইন কভার করে: ডেটা প্রস্তুতি, বিশ্লেষণ, মডেলিং, ভিজ্যুয়ালাইজেশন এবং রিপোর্ট তৈরি স্বয়ংক্রিয়ভাবে সম্পাদন।
- উন্মুক্ত ডেটা গবেষণা: কাঠামোবদ্ধ ডেটা (ডেটাবেস, CSV, Excel), আধা-কাঠামোবদ্ধ ডেটা (JSON, XML, YAML) এবং অকাঠামোবদ্ধ ডেটা (TXT, Markdown) প্রক্রিয়া করতে পারে, শেষে বিশ্লেষণ রিপোর্ট তৈরি করে।
- সম্পূর্ণ ওপেন-সোর্স: মডেল (DeepAnalyze-8B), কোড, প্রশিক্ষণ ডেটা (DataScience-Instruct-500K) এবং ডেমো সব ওপেন-সোর্স, যা স্থানীয় ডিপ্লয়মেন্ট বা সেকেন্ডারি ডেভেলপমেন্টের জন্য সুবিধাজনক।
ব্যবহারের পদ্ধতি
- মডেলটি vLLM দিয়ে ডিপ্লয় করা যায়, OpenAI-স্টাইল API ইন্টারফেস প্রদান করে, সাথে মেমোরি কনফিগারেশন সুপারিশ টেবিল দেওয়া আছে, যা 16GB থেকে 80GB VRAM পরিস্থিতি কভার করে, কোয়ান্টাইজড মডেল এবং FP8 KV Cache সমর্থন করে।
- একাধিক ইন্টারঅ্যাকটিভ ইন্টারফেস প্রদান করে: WebUI, WebUI v2 (HeyWhale API এবং Docker-ভিত্তিক স্যান্ডবক্স কোড এক্সিকিউশন সমর্থন করে), JupyterUI এবং কমান্ড-লাইন ইন্টারফেস (চীনা ও ইংরেজি সমর্থন করে)।
- API Key আবেদনের চ্যানেল এবং ব্যবহারের ডকুমেন্টেশন প্রদান করে, পাশাপাশি নিজে OpenAI-স্টাইল সার্ভিস সেটআপ করাও সমর্থন করে।
প্রশিক্ষণ ও মূল্যায়ন
- DeepSeek-R1-0528-Qwen3-8B বা DeepAnalyze-8B-এর উপর ভিত্তি করে ফাইন-টিউনিং সমর্থন করে, একক-ক্ষমতা ফাইন-টিউনিং, বহু-ক্ষমতা এজেন্ট কোল্ড-স্টার্ট প্রশিক্ষণ এবং রিইনফোর্সমেন্ট লার্নিং প্রশিক্ষণ স্ক্রিপ্ট প্রদান করে।
- প্লেগ্রাউন্ডে বেশিরভাগ বিদ্যমান ডেটা সায়েন্স বেঞ্চমার্কের মূল্যায়ন প্রক্রিয়া একীভূত করা হয়েছে, যা DeepAnalyze বা নিজস্ব এজেন্ট মূল্যায়নের জন্য সুবিধাজনক।
ইকোসিস্টেম ও সম্পর্কিত প্রকল্প
- সম্পর্কিত প্রকল্পগুলির মধ্যে রয়েছে SkillAdam (এজেন্ট দক্ষতা স্বয়ংক্রিয় অপ্টিমাইজেশন প্লাগইন), DeepPrep (ডেটা প্রস্তুতি এজেন্ট), CoDA-Bench (ডেটা-নিবিড় বিশ্লেষণ কাজের জন্য কোড এজেন্ট বেঞ্চমার্ক) এবং DA-Studio (WebUI v2-এর পিছনের সিস্টেম)।
- প্রশিক্ষণ ফ্রেমওয়ার্ক ms-swift এবং SkyRL-এর উপর ভিত্তি করে, প্রশিক্ষণ ডেটা সোর্সের মধ্যে রয়েছে Reasoning-Table, Spider, BIRD, DABStep ইত্যাদি।
প্রযোজ্য পরিস্থিতি
স্বয়ংক্রিয় ডেটা বিশ্লেষণ, ব্যাচ বিশ্লেষণ রিপোর্ট তৈরি, বা স্থানীয় প্রাইভেট ডিপ্লয়মেন্টে ডেটা বিশ্লেষণ সহায়ক প্রয়োজন এমন ব্যবহারকারী এবং দলের জন্য উপযুক্ত।
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.