ওপেন সোর্স। নতুন সম্ভাবনা।

requests-এর উপর ভিত্তি করে তৈরি একটি Bilibili ভিডিও ব্যাচ ডাউনলোডার, যা মাল্টি-পার্ট ডাউনলোড, সাবটাইটেল, ব্যারেজ এবং কভার গ্র্যাবিং সমর্থন করে এবং গ্রাফিক্যাল ইন্টারফেস ও AI কর্পাস ট্রান্সক্রিপশন সুবিধা প্রদান করে।

newspaper3k হলো ওয়েব থেকে নিবন্ধ বের করা ও এদেরকে পরিচালনা করার জন্য তৈরি একটি Python 3 লাইব্রেরি, যা সম্পূর্ণ টেক্সট ও মেটাডেটা এক্সট্রাকশনের টুলস সরবরাহ করে।

EasySpider (易采集) একটি সম্পূর্ণরূপে বিনামূল্যের ভিজ্যুয়াল নো-কোড ওয়েব স্ক্র্যাপিং ও ব্রাউজার অটোমেশন টুল; গ্রাফিকাল ইন্টারফেসের মাধ্যমে ওয়েব পৃষ্ঠার উপাদানকে ক্লিক করে ডেটা সংগ্রহের কাজ তৈরি করা যায়, এবং এটি কমান্ড লাইন চালানো, ফ্লোচার্ট লজিক, সময়সূচী কাজ এবং দ্বিতীয় উন্নয়নকে সমর্থন করে।

Douyin এবং TikTok-এর জন্য একটি সেলফ-হোস্টেড ডাটা API। এটি পোস্ট, প্রোফাইল, মন্তব্য, প্লেলিস্ট সংগ্রহ করে এবং ওয়াটারমার্ক ছাড়া ভিডিও ও ছবি ডাউনলোড করে।

Lux একটি Go-তে লেখা দ্রুত ও সহজ ভিডিও ডাউনলোডার CLI টুল যা YouTube, Bilibili, Instagram-সহ বিভিন্ন সাইট থেকে ভিডিও, প্লেলিস্ট, ইমেজ ও অডিও ডাউনলোড করতে সাহায্য করে।

Huginn হলো একটি সেলফ-হোস্টেড সিস্টেম যার মাধ্যমে এমন এজেন্ট তৈরি করা যায় যা ইভেন্ট মনিটর করে এবং আপনার হয়ে অনলাইন কাজগুলো স্বয়ংক্রিয়ভাবে সম্পন্ন করে।

Firecrawl একটি ওপেন-সোর্স ওয়েব ডেটা API, যা ওয়েবসাইট অনুসন্ধান, স্ক্র্যাপিং, ক্রলিং এবং ইন্টারঅ্যাক্ট করার সুবিধা দেয়। এটি পেজগুলোকে পরিষ্কার Markdown, JSON বা স্ক্রিনশটে রূপান্তর করে, যা AI এজেন্ট ও অ্যাপ্লিকেশনের জন্য LLM-রেডি ডেটা হিসেবে ব্যবহৃত হয়।

Crawlee হল একটি Python ওয়েব স্ক্র্যাপিং এবং ব্রাউজার অটোমেশন লাইব্রেরি যা নির্ভরযোগ্য ক্রলার তৈরি করতে ব্যবহৃত হয়। এটি HTTP এবং হেডলেস ব্রাউজার ক্রলিং, স্বয়ংক্রিয় রিট্রাই, প্রক্সি রোটেশন এবং AI/LLM অ্যাপ্লিকেশনের জন্য ডেটা স্টোরেজ সমর্থন করে।