প্রকল্প সম্পর্কে

Opik হলো Comet-এর তৈরি একটি Apache-2.0 লাইসেন্সযুক্ত, ওপেন-সোর্স প্ল্যাটফর্ম, যা LLM পর্যবেক্ষণ, মূল্যায়ন এবং AI এজেন্ট ট্রেসিংয়ের জন্য ব্যবহৃত হয়। এটি LLM অ্যাপ্লিকেশনের সম্পূর্ণ জীবনচক্র কভার করে, উন্নয়ন ট্রেসিং থেকে শুরু করে প্রোডাকশন মনিটরিং পর্যন্ত। মূল বৈশিষ্ট্যগুলির মধ্যে রয়েছে LLM কল এবং বহু-ধাপের এজেন্ট ওয়ার্কফ্লো গভীরভাবে ট্রেসিং, মূল্যায়নের জন্য ডেটাসেট এবং পরীক্ষা, হ্যালুসিনেশন সনাক্তকরণ এবং RAG মূল্যায়নের জন্য LLM-অ্যাজ-আ-জাজ মেট্রিক্স, প্রম্পট ব্যবস্থাপনা, এবং অনলাইন মূল্যায়ন নিয়মসহ প্রোডাকশন-প্রস্তুত ড্যাশবোর্ড। প্ল্যাটফর্মটি ফ্রেমওয়ার্ক-নিরপেক্ষ এবং Python ও TypeScript SDK, OpenTelemetry, এবং LangChain, Anthropic, Bedrock, CrewAI, এবং Autogen সহ অসংখ্য থার্ড-পার্টি ইন্টিগ্রেশন সমর্থন করে। Opik-কে Docker Compose ব্যবহার করে লোকাল ডেভেলপমেন্টের জন্য বা Kubernetes-এ Helm দিয়ে স্কেলযোগ্য ডিপ্লয়মেন্টের জন্য সেলফ-হোস্ট করা যায়, যেখানে সম্পূর্ণ সার্ভার ব্যাকএন্ড এবং ওয়েব অ্যাপ্লিকেশন ওপেন-সোর্স লাইসেন্সের আওতায় অন্তর্ভুক্ত থাকে। একটি PyTest ইন্টিগ্রেশন LLM পাইপলাইনের CI/CD মূল্যায়ন সক্ষম করে, এবং একটি MCP সার্ভার Claude Code এবং Cursor-এর মতো কোডিং এজেন্টদের ট্রেস অ্যাক্সেস এবং মূল্যায়ন চালানোর সুযোগ দেয়।