ওপেন সোর্স। নতুন সম্ভাবনা।

LangExtract হলো গুগলের একটি পাইথন লাইব্রেরি যা এলএলএম ব্যবহার করে অগঠিত পাঠ্য থেকে কাঠামোবদ্ধ তথ্য বের করে এবং প্রতিটি বেরকৃত অংশ মূল পাঠ্যের নির্দিষ্ট স্থানে গ্রাউন্ড করে

Lexos একটি ইভেন্ট-চালিত AI ডকুমেন্ট প্রসেসিং ইঞ্জিন, যা Go গেটওয়ে, Python ওয়ার্কার, Redis কিউ এবং সেলফ-হোস্টেড মডেল ব্যবহার করে অফলাইন RAG, সারাংশ এবং স্পিচ ট্রান্সক্রিপশন সক্ষম করে।

LEANN একটি লঘু ভেক্টর ডেটাবেস যা গ্রাফ-ভিত্তিক নির্বাচিত পুনর্গণনার মাধ্যমে সঞ্চয়স্থানের প্রয়োজনীয়তা ৯৭% পর্যন্ত কমিয়ে ব্যক্তিগত RAG অ্যাপ্লিকেশনের জন্য ডিজাইন করা হয়েছে।

CocoIndex হলো একটি ওপেন-সোর্স ইনক্রিমেন্টাল ইনডেক্সিং ফ্রেমওয়ার্ক যা পরিবর্তিত ডেটা মাত্র পুনরায় প্রক্রিয়া করে AI এজেন্ট এবং LLM অ্যাপ্লিকেশনের জন্য ক্রমাগত সতেজ প্রসঙ্গ প্রদান করে।

MemPalace একটি লোকাল-ফার্স্ট এআই মেমরি সিস্টেম, যা কথোপকথন ও প্রকল্পের ইতিহাস হুবহু টেক্সট আকারে সংরক্ষণ করে এবং সারাংশ না করে সেমান্টিক সার্চের মাধ্যমে উদ্ধার করে। এতে প্লাগযোগ্য ব্যাকএন্ড, নলেজ গ্রাফ, এমসিপি সার্ভার ও কোডিং এজেন্টের জন্য সিএলআই হুক রয়েছে।

MinerU একটি ওপেন-সোর্স ডকুমেন্ট পার্সিং ইঞ্জিন যা PDF, ছবি, DOCX, PPTX এবং XLSX-কে LLM, RAG ও এজেন্ট ওয়ার্কফ্লোর জন্য স্ট্রাকচার্ড Markdown/JSON-এ রূপান্তর করে। এটি VLM+OCR ডুয়াল ইঞ্জিন, ১০৯ ভাষার OCR এবং প্রাইভেট/অফলাইন ডিপ্লয়মেন্ট সমর্থন করে।

Zotero CLI হলো Zotero লাইব্রেরি পরিচালনা এবং কঠোর সিস্টেমেটিক লিটারেচার রিভিউ সমর্থনের জন্য একটি ইংরেজি ভাষার কমান্ড-লাইন টুল। এটি আইটেম অপারেশন, মাল্টি-সোর্স ইমপোর্ট, ইন্টারঅ্যাক্টিভ স্ক্রিনিং, অডিট ট্রেইল, সাইটেশন স্নোবলিং, ডেটা এক্সট্রাকশন, PRISMA রিপোর্টিং এবং ঐচ্ছিক লোকাল RAG/LLM-ভিত্তিক সেমান্টিক সার্চের সমন্বয় করে।

ব্রাজিলের Base Nacional Comum Curricular (BNCC) অনুসন্ধানের জন্য npm/PyPI প্যাকেজ ও MCP সার্ভার। MEC/CNE-যাচাইকৃত 1,721টি শিখনফল এমবেড করা, রানটাইম নির্ভরতা শূন্য। TypeScript, Python অ্যাপ্লিকেশন বা MCP-এর মাধ্যমে AI এজেন্টে BNCC সংযুক্ত করতে কাজ করে।

সেম্যান্টিক সার্চ, LLM অর্কেশন এবং ভাষা মডেল কাজের জন্য একটি অল-ইন-ওয়ান এআই ফ্রেমওয়ার্ক।

Semantica হলো গ্রাফ-নেটিভ ইনফ্রাস্ট্রাকচার যা AI সিস্টেমের জন্য কাঠামোগত প্রসঙ্গ, নির্ণায়ক যুক্তি এবং পূর্ণ সিদ্ধান্ত অভিব্যক্তি প্রদান করে। এটি LLM ও এজেন্টদের জন্য একজন সেমানটিক স্তর হিসেবে কাজ করে।

Vector Watcher হলো LanceDB ভেক্টর ডাটাবেস এক্সপ্লোর এবং ম্যানেজ করার জন্য একটি ক্রস-প্ল্যাটফর্ম ডেস্কটপ GUI। এটি Tauri, React এবং TypeScript দিয়ে তৈরি এবং এতে কানেকশন ম্যানেজমেন্ট ও সিমিলারিটি সার্চের সুবিধা রয়েছে।

প্যাথওয়ে স্ট্রিম প্রসেসিং, রিয়েল-টাইম অ্যানালিটিক্স এবং LLM ও RAG অ্যাপ্লিকেশনসহ AI পাইপলাইনের জন্য একটি পাইথন ETL ফ্রেমওয়ার্ক। এটি ইনক্রিমেন্টাল কম্পিউটেশনের জন্য রাস্ট ইঞ্জিনের উপর পাইথন কোড চালায়, একই কোডের মাধ্যমে ব্যাচ এবং স্ট্রিমিং ডেটা উভই সাপোর্ট করে, এবং ডকার ও কুবারনেটিসের মাধ্যমে ডিপ্লয় হয়।

AksharaMD একটি স্থানীয়, পার্সার-নির্ভর নয় এমন টুল যা মূল্যায়ন করে যে একটি নির্বাচিত ডকুমেন্ট পার্সার একটি সোর্স ফাইলকে AI-বান্ধব মার্কডাউনে কতটা ভালোভাবে রূপান্তর করেছে, প্রতি-ডকুমেন্ট প্রস্তুতি স্কোর, ব্লক-স্তরের উৎস ট্যাগ, নামযুক্ত সতর্কতা এবং একটি ঐচ্ছিক উৎস-ভিত্তিক ACCEPT/REJECT রায় ফেরত দেয়।

Google Gemini Notebook (পূর্বে NotebookLM)-এর জন্য একটি অনানুষ্ঠানিক Python API এবং CLI, যা এর grounded AI ক্ষমতা এবং কন্টেন্ট জেনারেশন টুলগুলোতে প্রোগ্রাম্যাটিক অ্যাক্সেস প্রদান করে।

একটি হালকা স্থানীয় API প্রক্সি যা চ্যাট ইতিহাস সংকুচিত করে, অপ্রয়োজনীয় কোড অপসারণ করে এবং সেমান্টিক ক্যাশিং বাস্তবায়ন করে LLM API খরচ কমায়।

Deep Dives是一个涵盖统计、机器学习、经济学和数学等领域的技术笔记和实验集。集合包含技术说明、计算实验和文章，旨在使复杂的主题简单化和可及时。主题包括抽样、概率分析、因果推断、深度学习架构、MLOps流水图、状态空间模型和Python内核。内容涵盖多领域，但聚焦实用应用和清晰。通过 GitHub Pages网站提供的全集，包含互动项目。所有材料用于教育和个人研究目的。