منصوبے کے بارے میں
Claude Video (/watch) ایک open-source skill ہے جو AI coding assistants کو ویڈیو content analyze کرنے کی صلاحیت دیتا ہے۔ By default، یہ agents webpages پڑھ سکتے ہیں اور scripts run کر سکتے ہیں لیکن ویڈیو process نہیں کر سکتے۔ یہ tool download، frame extraction، اور transcription orchestrate کر کے اس gap کو پورا کرتا ہے، پھر results AI کے multimodal context میں دے دیتا ہے۔
**Supported Hosts:** Claude Code، Codex، Cursor، Copilot، Gemini CLI، claude.ai web، اور 50+ other Agent Skills hosts۔
**How it works:**
1. ایک URL (YouTube، TikTok، Loom، Vimeo، وغیرہ) یا local file path (.mp4، .mov، .mkv، .webm) قبول کرتا ہے۔
2. yt-dlp استعمال کر کے پہلے native captions حاصل کرتا ہے (free، download کی ضرورت نہیں)۔ اگر unavailable ہوں، تو صرف ضروری audio/video download کرتا ہے۔
3. ffmpeg استعمال کر کے chosen detail mode کی بنیاد پر frames extract کرتا ہے: efficient (fast keyframes)، balanced (scene-change detection)، یا token-burner (uncapped scene candidates)۔
4. Audio Groq's whisper-large-v3 (preferred) یا fallback کے طور پر OpenAI's whisper-1 کے ذریعے transcribe کرتا ہے۔
5. AI ہر frame کو image کے طور پر timestamped transcript کے ساتھ پڑھتا ہے تاکہ actual visual اور audio content پر مبنی سوالات کے جوابات دیے جا سکیں۔
**Key features:**
- Frame deduplication: Near-identical frames (مثلاً static slides) کو pure-stdlib Python mean absolute difference algorithm کے ذریعے drop کرتا ہے، جس سے token budget بچتا ہے۔
- Detail modes: Speed/token cost اور visual fidelity کے درمیان trade-off کرتا ہے، ساتھ caps ہیں تاکہ long videos پر context budget ختم نہ ہو۔
- Focused analysis: --start/--end flags support کرتا ہے تاکہ specific video sections پر dense per-second frame budgets استعمال کیے جا سکیں۔
- Zero-config setup: macOS پر brew کے ذریعے ffmpeg اور yt-dlp auto-install کرتا ہے؛ Linux/Windows کے لیے exact commands print کرتا ہے۔
**Common use cases:** Viral content structure analyze کرنا، screen recordings سے bugs diagnose کرنا، long videos summarize کرنا، launch updates سے substance extract کرنا، اور playlists کو searchable notes میں تبدیل کرنا۔
Comments
0 Rating appears after 10 ratings
Sign in to join the discussion.