اوپن سورس۔ نئے امکانات۔

ميجر ایک اوپن سورس OSINT کمانڈ لائن ٹول ہے جو صارف نام سے کسی شخص کی پروفائل 3000+ ویب سائٹس پر چیک کرتا ہے اور HTML, PDF, JSON, CSV رپورٹس بناتا ہے۔

Firecrawl ایک اوپن سورس ویب ڈیٹا API ہے جو ویب سائٹس کو تلاش، اسکریپ، کرال اور انٹرایکٹ کرنے کے لیے استعمال ہوتی ہے، اور صفحات کو LLM کے لیے تیار صاف Markdown، JSON یا اسکرین شاٹس میں تبدیل کرتی ہے۔

Crawlee ایک Python ویب اسکریپنگ اور براؤزر آٹومیشن لائبریری ہے جو قابل اعتماد کرالر بنانے کے لیے استعمال ہوتی ہے۔ یہ HTTP اور ہیڈلیس براؤزر کرالنگ، خودکار ریٹرائیز، پراکسی گردش، اور AI/LLM ایپلیکیشنز کے لیے ڈیٹا اسٹوریج کو سپورٹ کرتی ہے۔