اوپن سورس۔ نئے امکانات۔

newspaper3k ویب سے مضامین اخذ اور مرتب کرنے کے لیے ڈیزائن کردہ پایتھن 3 لائبریری ہے جو مکمل متن اور میٹا ڈیٹا اخذ کے لیے آلات فراہم کرتی ہے۔

اسکرپی پائیتھن کے لیے ایک تیز اور ہائی لیول ویب اسکرپنگ فریم ورک ہے جو ویب سائٹس سے ساختی ڈیٹا نکالنے کے لیے استعمال ہوتا ہے۔ یہ کراس پلیٹ فارم ہے اور پائیتھن 3.10 یا اس سے نیا ورژن درکار ہے۔

پائتھون کے لیے موافق ویب اسکریپنگ فریم ورک: ذہین DOM ٹریکنگ، اینٹی بوٹ بائی پاس فیچرز، توقف/بحالی کے ساتھ متوازی کرالنگ، پراکسی روٹیشن، اور MCP/AI کے لیے تیار آؤٹ پٹ۔

Crawlee ایک Python ویب اسکریپنگ اور براؤزر آٹومیشن لائبریری ہے جو قابل اعتماد کرالر بنانے کے لیے استعمال ہوتی ہے۔ یہ HTTP اور ہیڈلیس براؤزر کرالنگ، خودکار ریٹرائیز، پراکسی گردش، اور AI/LLM ایپلیکیشنز کے لیے ڈیٹا اسٹوریج کو سپورٹ کرتی ہے۔