اوپن سورس۔ نئے امکانات۔

dlt ایک اوپن سورس پائتھون لائبریری ہے جو خودکار ڈیٹا لوڈنگ کے لیے ہے۔ یہ REST APIs، SQL ڈیٹا بیسز، فائلوں اور DataFrames سے ڈیٹا نکال کر 20 سے زائد منزلوں میں لوڈ کرتی ہے، جس میں schema inference، type mapping، incremental loading اور Ibis-based transformations شامل ہیں۔

lakeFS ایک سورس-دستیاب ڈیٹا ورژن کنٹرول ٹول ہے جو آبجیکٹ اسٹوریج کو Git جیسے ریپوزٹری میں تبدیل کرتا ہے، جس سے S3، Azure Blob اور GCS پر ڈیٹا لیکس کے لیے برانچنگ، کمٹ، رول بیک اور ہکس ممکن ہوتے ہیں۔