कंटेंट पर जाएँ
TakoAPI
स्किल्स पर वापस

gpu-cluster-monitor

sounderliu द्वारा

Web & Frontend Development
295clawskills.sh द्वारा बताए गए डाउनलोड
0व्यूज़
0 लाइकइस स्किल को लाइक करने के लिए साइन इन करें
—अभी तक कोई रेटिंग नहीं
आपकी रेटिंग

संक्षिप्त

A high-performance engineering tool for deep web scraping.

विवरण

यह स्किल क्या करती है

A web scraping tool that runs inside a Docker container using Crawlee and Playwright to extract content from sites with anti-bot protections. Targets JavaScript-heavy platforms like YouTube and X/Twitter. Outputs structured JSON with status, content type, and raw data.

Running Playwright inside Docker bypasses bot detection that blocks standard HTTP-based scrapers on protected sites.

इसे कब इस्तेमाल करें

  • Extracting transcripts from YouTube videos
  • Scraping posts or threads from X/Twitter
  • Getting raw text from JavaScript-rendered pages
  • Feeding scraped content directly into LLM pipelines
  • Collecting video descriptions in bulk from YouTube

उदाहरण वर्कफ़्लो

इनपुट

User asks: Get the transcript from this YouTube video URL

एजेंट
  1. 1

    Validates the YouTube video ID from the provided URL

  2. 2

    Runs the Docker container with the target URL as argument

  3. 3

    Crawlee and Playwright load the page and intercept transcript data

  4. 4

    Parses the JSON output from stdout for status and data fields

आउटपुट

JSON object with status SUCCESS, type TRANSCRIPT, videoId, and full transcript text

आवश्यकताएँ

  • Docker installed and running on the host machine

इंस्टॉलेशन

clawhub install sounderliu/gpu-cluster-monitor

CLI कमांड चलाएँ, या प्रॉम्प्ट को Claude Code, Cursor, Codex या जो भी कोडिंग एजेंट आप इस्तेमाल करते हैं उसमें पेस्ट करें।

लिंक