Открытый код. Новые возможности.

Загрузчик видео с Bilibili на базе requests с поддержкой пакетного скачивания частей, субтитров, даммаку и обложек, оснащенный графическим интерфейсом и функцией преобразования в AI-корпус.

newspaper3k — библиотека Python 3 для извлечения и систематизации новостных статей с веб-сайтов; предоставляет инструменты для получения полного текста, метаданных и изображений.

易采集EasySpider — полностью бесплатный визуальный инструмент веб-скрейпинга и автоматизации браузера без кода, позволяющий через графический интерфейс выбирать элементы веб-страницы для создания задач сбора данных, поддерживает выполнение из командной строки, логику блок-схем, планируемые задачи и вторичную разработку.

Самостоятельно размещаемый API для сбора данных Douyin и TikTok. Позволяет получать посты, профили авторов, комментарии, плейлисты, а также скачивать видео и фотоальбомы без водяных знаков. Включает самовосстанавливающийся пул идентичностей, архивирование в PostgreSQL, REST API, MCP сервер, CLI и веб-консоль.

Lux — быстрый и простой CLI-инструмент для загрузки видео на Go. Поддерживает скачивание видео, плейлистов, изображений и аудио с YouTube, Bilibili, Instagram и других платформ.

Huginn — это система с self-hosted развертыванием для создания агентов, которые автоматизируют онлайн-задачи путем мониторинга событий и выполнения действий от вашего имени.

Firecrawl — это открытый API-сервис для веб-данных, который выполняет поиск, скрейпинг, обход и взаимодействие с сайтами, преобразуя страницы в чистый Markdown, JSON или скриншоты для использования LLM и AI-агентами.

Crawlee — это библиотека Python для веб-скрапинга и автоматизации браузеров, предназначенная для создания надежных краулеров. Поддерживает HTTP- и headless-браузерный обход, автоматические повторы, ротацию прокси и хранение данных для AI/LLM-приложений.