newspapercodelucas
NOUVEAUnewspaper3k est une bibliothèque Python 3 conçue pour extraire et compiler des articles du web, offrant des outils d'extraction de texte complet et de métadonnées.
OPEN SOURCE, OPEN TO EVERYONE
Code ouvert. Horizons nouveaux.
Découvrez des projets open source de qualité, soumettez des projets anonymement, puis revendiquez et éditez votre propre projet.
✳Sélection humaine · Découvrez de bons projets open source4109découverts
Un peu de curiosité. Un monde de code ouvert.
THE FIRST COLLECTIONTopic: crawling清除
scrapyscrapy
NOUVEAUScrapy est un framework de web scraping rapide et haut niveau pour Python, permettant d'extraire des données structurées. Multiplateforme, il nécessite Python 3.10+ et est maintenu par Zyte.
scraplingD4Vinci
NOUVEAUFramework de scraping web adaptatif pour Python : suivi intelligent du DOM, fetchers contournant les anti-bots, crawling concurrent avec pause/reprise, rotation de proxys et sortie prête pour MCP/IA.
crawlee-pythonapify
NOUVEAUCrawlee est une bibliothèque Python de scraping web et d'automatisation de navigateur pour créer des crawlers fiables. Elle prend en charge le crawling HTTP et par navigateur sans tête, les nouvelles tentatives automatiques, la rotation de proxys et le stockage de données pour les applications IA/LLM.