Maigret is an OSINT command-line tool that builds a dossier on a person from a username alone, checking 3000+ sites, extracting profile data, and exporting reports in HTML, PDF, JSON, CSV and graph formats.
ओपन सोर्स। नई संभावनाएँ।
उत्कृष्ट ओपन-सोर्स प्रोजेक्ट खोजें, गुमनाम रूप से प्रोजेक्ट सबमिट करें और अपने प्रोजेक्ट का दावा कर उसे संपादित करें।
जिज्ञासा के साथ ओपन सोर्स खोजें।
THE FIRST COLLECTIONScrapy एक तेज़, उच्च-स्तरीय वेब स्क्रैपिंग फ्रेमवर्क है जो Python के लिए बनाया गया है। यह क्रॉस-प्लेटफ़ॉर्म है और इसके लिए Python 3.10 या उससे नए संस्करण की आवश्यकता होती है। इसका रखरखाव Zyte और अन्य योगदानकर्ता करते हैं।
पायथन के लिए अनुकूली वेब स्क्रैपिंग फ्रेमवर्क: बुद्धिमान DOM ट्रैकिंग, एंटी-बॉट बायपास फेचर, पॉज़/रिज़्यूम के साथ समवर्ती क्रॉलिंग, प्रॉक्सी रोटेशन, और MCP/AI-तैयार आउटपुट।
Firecrawl एक ओपन-सोर्स वेब डेटा API है जो वेबसाइटों को खोजने, स्क्रैप करने, क्रॉल करने और उनसे इंटरैक्ट करने के लिए है, पेजों को साफ Markdown, JSON या स्क्रीनशॉट में बदलकर AI एजेंट्स और ऐप्स के लिए LLM-ready उपयोग योग्य बनाता है।
Crawlee एक Python वेब स्क्रैपिंग और ब्राउज़र स्वचालन लाइब्रेरी है जो विश्वसनीय क्रॉलर बनाने के लिए है। यह HTTP और हेडलेस ब्राउज़र क्रॉलिंग, स्वचालित रीट्राई, प्रॉक्सी रोटेशन और AI/LLM अनुप्रयोगों के लिए डेटा स्टोरेज का समर्थन करता है।