প্রকল্প সম্পর্কে
Vouch হলো একটি ফাইন্যান্স-গ্রেড টুল-কলিং এজেন্ট যা SEC ফাইলিং ব্যবহার করে যেকোনো মার্কিন পাবলিক কোম্পানি সম্পর্কে আর্থিক প্রশ্নের উত্তর দেয়। এটি একটি দ্বৈত-পথ আর্কিটেকচার অনুসরণ করে: সঠিক সংখ্যা আসে লাইভ XBRL ডেটার উপর ডিটারমিনিস্টিক টুল থেকে (LLM কখনোই আর্থিক সংখ্যার উপর পাটিগণিত করে না), আর ন্যারেটিভ প্রসঙ্গ আনা হয় 10-K, 10-Q এবং 8-K ডকুমেন্টের উপর pgvector ডেন্স সার্চের মাধ্যমে। একটি আউটপুট গার্ডরেল এমন যেকোনো সংখ্যা ব্লক করে যার উৎস পর্যন্ত ট্রেস করা যায় না—সেটি XBRL টুল হোক বা উদ্ধৃত ফাইলিং প্যাসেজ—যাতে সিস্টেম বানানোর বদলে উত্তর দিতে বিরত থাকে।
মূল সক্ষমতাগুলোর মধ্যে রয়েছে সঠিক সংখ্যা আনার টুল (`get_financials`), স্ট্যান্ডার্ড অনুপাত (`get_ratio`), বছর-ভিত্তিক প্রবৃদ্ধি (`get_growth`), কাস্টম ফর্মুলা (`compute_formula`), সম্পূর্ণ স্টেটমেন্ট (`get_statement`), বৃহত্তম/ক্ষুদ্রতম লাইন আইটেম, সেগমেন্ট/ভৌগোলিক বিভাজন, এবং গুণগত সার্চ। অনুপাত ও প্রবৃদ্ধি নির্দিষ্ট কনভেনশন মেনে গণনা করা হয়, যাতে ভুল বেস মেট্রিক বেছে নেওয়ার সাধারণ LLM ভুল এড়ানো যায়। ডিলিস্টেড বা নাম পরিবর্তিত কোম্পানিগুলো মৃত টিকার নয়, বরং নাম দিয়ে রিজলভ করা হয়।
সিস্টেমটি তিন-স্তরের মূল্যায়নের মাধ্যমে যাচাই করা হয়: 84টি কেসের একটি অভ্যন্তরীণ CI গেট যা সংখ্যাগত গ্রাউন্ডিং, সাইটেশন, বিরত থাকা এবং ট্রাজেক্টরি মেট্রিক্স স্কোর করে; ক্যালিব্রেটেড LLM জাজ (Cohen’s κ = 0.76-এ faithfulness, বিরত থাকা উত্তরে শূন্য ফলস পজিটিভ); এবং FinanceBench (Patronus AI)-এ বাহ্যিক বেঞ্চমার্কিং, যেখানে এটি সংখ্যাগত সেটে 94% অ্যাড্রেসেবল কভারেজ অর্জন করেছে শূন্য-ফেব্রিকেশন রেটে এবং 96% ন্যারেটিভ গ্রাউন্ডেডনেসে। অ্যাডভার্সারিয়াল রেড-টিম টেস্টিং ফেব্রিকেশন রেট 11% থেকে 0-তে নামিয়েছে।
ব্যবহারকারীরা নিজেদের আর্থিক ডকুমেন্ট (অভ্যন্তরীণ রিপোর্ট, নন-পাবলিক কোম্পানি) আপলোড করতে পারেন এবং এজেন্ট Docling-এর মাধ্যমে টেবিল-সেল এক্সট্র্যাকশন ব্যবহার করে সেগুলো থেকে উত্তর দেয়, সেল-স্তরের সাইটেশনসহ (`filename · page · row/col`)। প্রতিটি ডকুমেন্ট প্রতি-ব্যবহারকারী আলাদা ও স্কোপড, যাতে ক্রস-ফাইল অ্যাট্রিবিউশন প্রতিরোধ হয়।
ডিপ্লয়মেন্টে একটি লোকাল সার্ভিস প্রকাশ করা হয় যেখানে `/ask`, `/export`, `/upload`, এবং একটি OpenAI-সামঞ্জস্যপূর্ণ চ্যাট এন্ডপয়েন্ট রয়েছে। ডিফল্ট মডেল o4-mini, এবং সিস্টেমে একটি মিস কিউ রয়েছে যা ভবিষ্যতে সম্প্রসারণের জন্য আনহ্যান্ডেলড মেট্রিক লগ করে। Vouch LangGraph এবং pgvector-এর উপর নির্মিত, যা আগের Slug Advisor প্রকল্পের রিট্রিভাল ও CI-eval ইঞ্জিনিয়ারিং পুনর্ব্যবহার করে।
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.