오픈 소스. 새로운 가능성.

국내 42개 주요 병원 채용공고를 Selenium으로 매일 수집하고, RaiT 검증 게이트웨이로 데이터 무결성을 점검한 뒤 중복을 걸러 엑셀 리포트로 산출하는 GitHub Actions 기반 자동화 파이프라인입니다.

Weibo Spider는 신랑 웨이보 사용자 데이터를 수집하는 Python 도구입니다. 사용자 정보와 웨이보 콘텐츠(텍스트, 이미지, 비디오 포함)를 크롤링하며, 데이터를 CSV, JSON, TXT 파일 또는 MySQL, MongoDB, SQLite 데이터베이스에 저장할 수 있어 학술 연구와 데이터 분석에 적합합니다.

Elysia와 FFmpeg를 사용하여 애니메이션 에피소드 HLS 링크에서 스크린샷을 캡처하고 GIF를 생성하는 경량 API입니다.

Scrapy는 Python용 고속 고수준 웹 스크래핑 프레임워크로, 웹사이트에서 구조화된 데이터를 추출하는 데 사용됩니다. 크로스 플랫폼이며 Python 3.10 이상이 필요하며 Zyte와 기여자들이 유지보수합니다.

Python용 적응형 웹 스크래핑 프레임워크: 지능형 DOM 추적, 안티봇 우회 페처, 일시정지/재개 가능한 동시 크롤링, 프록시 로테이션, MCP/AI 지원 출력.

OCRmyPDF는 스캔된 PDF에 검색 가능한 OCR 텍스트 레이어를 추가하여 검증된 PDF/A 출력을 생성하는 명령줄 도구입니다. Tesseract를 사용해 100개 이상의 언어를 지원하며, 기울기 보정 및 회전 보정 기능을 제공합니다.

DouK-Downloader(旧称 TikTokDownloader)는 抖音(Douyin)와 TikTok 콘텐츠 다운로드 및 데이터 수 도구입니다. Python 3.12+ 기반, Docker 배포를 지원하며 영상/이미지/라이브 다운로드, 계정/댓글/검색/인기 차트 데이터 수집, Web API/UI, 터미널 상호작용 모드를 제공합니다.

spotDL은 Spotify 플레이리스트의 곡을 YouTube를 통해 찾아 다운로드하며, 앨범 아트, 가사 및 메타데이터를 함께 제공하는 명령줄 도구입니다.

newspaper3k는 웹에서 기사를 추출하고 선별하기 위한 Python 3 라이브러리입니다. 전체 텍스트 및 메타데이터 추출 도구를 제공합니다.