कंटेंट पर जाएँ
TakoAPI
स्किल्स पर वापस

crawl4ai

codylrn804 द्वारा

Web & Frontend Development
1.5kclawskills.sh द्वारा बताए गए डाउनलोड
2स्टार
0व्यूज़
0 लाइकइस स्किल को लाइक करने के लिए साइन इन करें
—अभी तक कोई रेटिंग नहीं
आपकी रेटिंग

संक्षिप्त

AI-powered web scraping framework for extracting structured data from websites.

विवरण

यह स्किल क्या करती है

Crawl4ai is a Python web scraping framework that combines browser automation with AI-assisted parsing to extract structured data from websites. It handles JavaScript-rendered pages, injects custom JS, and outputs clean markdown, HTML, or structured JSON.

Handles JavaScript-rendered content natively without requiring a separate browser driver setup, unlike BeautifulSoup or Scrapy alone.

इसे कब इस्तेमाल करें

  • Scraping product prices and names from an e-commerce site
  • Extracting article titles from a news or blog page
  • Pulling form data from a page that loads via JavaScript
  • Cleaning and converting messy HTML into readable markdown
  • Batch scraping multiple URLs in a single session

उदाहरण वर्कफ़्लो

इनपुट

User asks: Extract all product names and prices from this e-commerce URL

एजेंट
  1. 1

    Instantiate AsyncWebCrawler with headless browser mode

  2. 2

    Run crawler on the URL with javascript=true and a custom js_code selector targeting product elements

  3. 3

    Receive extracted_content with structured name/price fields

  4. 4

    Filter and normalize the returned array into a clean list

आउटपुट

JSON array of objects each containing product name and price

इंस्टॉलेशन

clawhub install codylrn804/crawl4ai

CLI कमांड चलाएँ, या प्रॉम्प्ट को Claude Code, Cursor, Codex या जो भी कोडिंग एजेंट आप इस्तेमाल करते हैं उसमें पेस्ट करें।

लिंक