オープンソース。新しい可能性。

EasySpiderは完全無料の可視化ノーコードWebクローラー・ブラウザ自動化ツールで、グラフィカルインターフェースでマウス操作のみで収集タスクを設計可能。コマンドライン実行、フローチャート論理、定期タスク、二次開発をサポート。

Luxは、Goで書かれた高速でシンプルな動画ダウンーダーCLIツールです。YouTube、Bilibili、Instagramなど、さまざまなサイトから動画、プレイリスト、画像、音声をダウンロードできます。

Firecrawlは、ウェブサイトをLLM対応データに変換するオープンソースAPIサービスです。検索、スクレイピング、クロール、サイトマッピング、バッチスクレイピング、AIエージェント機能を提供し、AIエージェントやRAGパイプラインを構築する開発者向けに設計されています。

AH Crawlerは、ウェブサイトの検索と分析に使用できるオープンソースツールで、PHP環境で動作します。

Crawleeは、Python向けのWebスクレイピングおよびブラウザ自動化ライブラリで、信頼性の高いクローラーを構築するために設計されています。HTTPおよびヘッドレスブラウザでのクロール、自動リトライ、プロキシローテーション、AI/LLMアプリケーション向けのデータ保存をサポートします。