প্রকল্প সম্পর্কে
Polymo ব্যবহারকারীদের একটি UI-এর মাধ্যমে API ইনজেশন পাইপলাইন সংজ্ঞায়িত করতে এবং সেগুলোকে স্বতন্ত্র Lakeflow Declarative Pipelines হিসেবে এক্সপোর্ট করতে দেয়। এটি requests, স্ট্যান্ডার্ড লাইব্রেরি এবং pyspark ব্যবহার করে সাধারণ Python কোড তৈরি করে, যা নিশ্চিত করে যে জেনারেট করা স্ক্রিপ্টগুলোর রানটাইম ডিপেন্ডেন্সি হিসেবে Polymo-র প্রয়োজন নেই।
এর মূল ক্ষমতাগুলোর মধ্যে রয়েছে:
- DataFrame, র- রেকর্ড এবং API রেসপন্স-এর লোকাল প্রিভিউসহ UI-ভিত্তিক পাইপলাইন সংজ্ঞা।
- পেজিনেশন, ইনক্রিমেন্টাল সিঙ্ক, পার্টিশনিং, ফিল্টার পুশডাউন, এরর হ্যান্ডলিং এবং XML রেসপন্স-এর জন্য বিশেষায়িত কোড জেনারেশন।
- Databricks CLI-এর মাধ্যমে পাইপলাইন বুটস্ট্র্যাপিং, ডেপ্লয়মেন্ট এবং চালানোর জন্য Databricks Asset Bundles-এর সাথে ইন্টিগ্রেশন।
- সিক্রেট হার্ডকোডিং এড়াতে Databricks secret scopes বা Unity Catalog সার্ভিস ক্রেডেনশিয়াল ব্যবহার করে নিরাপদ ক্রেডেনশিয়াল ম্যানেজমেন্ট সাপোর্ট।
- pip, uvx অথবা Docker-এর মাধ্যমে লঞ্চ করার ক্ষমতা।
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.