newspaper3k هو مكتبة بايثون 3 مستخدمة في استخراج والمحرر من المقالات الإخبارية، توفر أدوات لاستخراج النص الكامل والبيانات الوصفية.
مصدر مفتوح. آفاق جديدة.
اكتشف مشاريع مفتوحة المصدر عالية الجودة، وأرسل المشاريع بشكل مجهول، وطالب بمشروعك المفتوح المصدر وحرّره.
فضول صغير. عالم من المصادر المفتوحة.
THE FIRST COLLECTION易采集EasySpider是一款免费可视化无代码网页爬虫工具,通过图形界面点选元素即可设计采集任务,支持命令行执行、流程图逻辑、定时任务与二次开发。
واجهة برمجة بيانات ذاتية الاستضافة لـ Douyin وTikTok. تجمع المنشورات والملفات الشخصية والتعليقات وقوائم التشغيل، وتحميل مقاطع الفيديو والألبومات دون علامات مائية. تتميز بمجموعة هويات تتعافى ذاتيًا، وأرشفة PostgreSQL، وREST API، وخادم MCP، وCLI، ولوحة ويب.
Lux أداة سطر أوامر مفتوحة المصدر لتحميل مقاطع الفيديو بواسطة Go، تدعم مواقع متعددة كـ YouTube وBilibili.
Huginn هو نظام يستضيفه المستخدم لبناء وكلاء يقومون بأتمتة المهام عبر الإنترنت من خلال مراقبة الأحداث واتخاذ الإجراءات نيابة عنك.
Firecrawl هي واجهة برمجة تطبيقات مفتوحة المصدر لبيانات الويب للبحث والكشط والزحف والتفاعل مع المواقع، وتحويل الصفحات إلى Markdown أو JSON أو لقطات شاشة جاهزة لنماذج اللغة الكبيرة لوكلاء الذكاء الاصطناعي والتطبيقات.
Crawlee هي مكتبة Python لجمع بيانات الويب وأتمتة المتصفح لبناء زاحفات موثوقة. تدعم الزحف عبر HTTP والمتصفح بدون واجهة، وإعادة المحاولة التلقائية، وتدوير البروكسي، وتخزين البيانات لتطبيقات الذكاء الاصطناعي.
أداة لتحميل فيديوهات Bilibili مبرمجة بلغة Python، تدعم التحميل الجماعي للأجزاء، والترجمات، والتعليقات العائمة، والأغلفة، مع واجهة رسومية وميزة تحويل النصوص المدعومة بالذكاء الاصطناعي.