প্রকল্প সম্পর্কে

Tracely হলো AI এজেন্টদের জন্য একটি সেলফ-হোস্টেবল ট্রেস-নেটিভ CI/CD সিস্টেম। এটি OTLP/HTTP-এর মাধ্যমে এজেন্ট ট্রেস গ্রহণ করে, স্ট্রাকচারাল চেক ও LLM জাজ দিয়ে সেগুলো গ্রেড করে, ব্যর্থতাগুলোকে ইস্যুতে ক্লাস্টার করে এবং ব্যর্থ ট্রেসগুলোকে রেকর্ড করা টুল ও LLM ফিক্সচারসহ হারমেটিক রিগ্রেশন কেসে উন্নীত করে। এই কেসগুলো CI-তে শূন্য মডেল খরচে রিপ্লে করা যায় এবং GitHub Action-এর মাধ্যমে পুল রিকোয়েস্ট ব্লক করতে পারে। প্ল্যাটফর্মটিতে রয়েছে ট্রেস টাইমলাইন, কনভার্সেশন রিপ্লে ও Fleet ভিউ, ইভ্যালুয়েটর কলাম, ফেইলিউর ক্লাস্টার, সিনারিও অথরিং, CI গেট, Slack/ইমেইল/ওয়েবহুক/LLM স্টেপসহ ভিজ্যুয়াল অ্যালার্ট ফ্লো বিল্ডার, ট্রেন্ড ও ক্রস-মেট্রিক বিশ্লেষণ, জাজ ক্যালিব্রেশন, একটি ইন-অ্যাপ অ্যাসিস্ট্যান্ট এবং একটি MCP সার্ভার। এটি লোকাল ব্যবহারের জন্য Docker Compose, Railway ওয়ান-ক্লিক ডিপ্লয়মেন্ট এবং একটি Python SDK-সহ আসে, যা OpenAI, Anthropic, Google, Mistral এবং LangChain কলগুলো স্বয়ংক্রিয়ভাবে ইনস্ট্রুমেন্ট করে। স্ট্যাকটিতে FastAPI, Celery, Next.js, Postgres, ClickHouse, Redis এবং MinIO ব্যবহৃত হয়।