প্রকল্প সম্পর্কে

AIfred Intelligence হল একটি স্ব-হোস্টেড স্বায়ত্তশাসিত AI সহকারী যা আপনার নিজস্ব হার্ডওয়্যারে স্থানীয়ভাবে চালানোর জন্য ডিজাইন করা হয়েছে। এটি বৃহৎ ভাষা মডেল ইনফারেন্সকে প্লাগইন-ভিত্তিক টুল সিস্টেম, মাল্টি-এজেন্ট ওয়ার্কফ্লো, ভয়েস ইন্টারফেস, ভিশন প্রসেসিং এবং স্থায়ী মেমোরির সাথে একত্রিত করে। মূল ক্ষমতাগুলির মধ্যে রয়েছে অনেকগুলি বিল্ট-ইন টুল জুড়ে ফাংশন কলিং যেমন ইমেইল (IMAP/SMTP), Google Calendar এবং Contacts, EssentialPIM ডাটাবেস CRUD, ChromaDB ভেক্টর সার্চ সহ ডকুমেন্ট ওয়ার্কস্পেস, স্যান্ডবক্সড Python এক্সিকিউশন, SearXNG/Tavily/Brave এর মাধ্যমে ওয়েব রিসার্চ, শিডিউলিং, সিস্টেম মনিটরিং, অনুবাদ এবং টেক্সট-টু-স্পিচ ন্যারেশন। একটি প্লাগইন সিস্টেম কোড পরিবর্তন ছাড়াই Python ফাইল হিসেবে চ্যানেল বা টুল প্লাগইন যোগ করার অনুমতি দেয়। মাল্টি-এজেন্ট সিস্টেম কাস্টম এজেন্ট, সাব-এজেন্ট ডেলিগেশন এবং Tribunal ও Symposion সহ ডিবেট মোড সমর্থন করে। ওয়েব UI বা বাহ্যিক চ্যানেলের মাধ্যমে এজেন্টদের নাম ধরে সম্বোধন করা যায়। একটি পারমিশন টিয়ার সিস্টেম, ক্রেডেনশিয়াল ব্রোকার, ইনপুট স্যানিটাইজেশন, রেট লিমিটিং এবং অডিট লগিং নিরাপত্তা নিয়ন্ত্রণ প্রদান করে। LLM ইনফ্রাস্ট্রাকচার একাধিক ব্যাকএন্ড সমর্থন করে: llama-swap এর মাধ্যমে llama.cpp, Ollama, vLLM, TabbyAPI এবং ক্লাউড API। এতে স্বয়ংক্রিয় কনটেক্সট ক্যালিব্রেশন, VRAM-সচেতন প্রোফাইল নির্বাচন, থিংকিং মোড এবং হিস্টোরি কমপ্রেশন অন্তর্ভুক্ত রয়েছে। ভয়েস ফিচারগুলির মধ্যে রয়েছে CPU/GPU রাউটিং সহ Whisper-ভিত্তিক স্পিচ-টু-টেক্সট, প্রতি-এজেন্ট কনফিগারেশন সহ একাধিক TTS ইঞ্জিন এবং Echo Dot 2 হার্ডওয়্যারের জন্য একটি ডেডিকেটেড FreeEcho.2 ভয়েস টার্মিনাল। ভিশন ফিচারগুলির মধ্যে রয়েছে ওয়েবক্যাম এবং RTSP ক্যামেরা সোর্স, একটি লাইভ প্রিভিউ মোডাল, প্রতি-ক্যামেরা ব্রিফিং এবং Vigilantia নামক একটি সার্ভেইল্যান্স মোড যাতে মোশন ডিটেকশন, জোন মাস্ক, ফেস রিকগনিশন, ইভেন্ট ক্লাস্টারিং এবং বাল্ক VLM বিশ্লেষণ রয়েছে। মাল্টিমোডাল মডেল এবং একটি ডেডিকেটেড ভিশন LLM সহ চ্যাটে ইমেজ অ্যাটাচমেন্ট সমর্থিত। প্রকল্পটিতে সেটআপ এবং মনিটরিংয়ের জন্য একটি ওয়েব UI অন্তর্ভুক্ত রয়েছে, যেখানে Message Hub হেডলেসভাবে ইনকামিং মেসেজ প্রসেস করতে পারে। ডকুমেন্টেশন ইংরেজি এবং জার্মান ভাষায় প্রদান করা হয়েছে।