Bỏ qua tới nội dung
TakoAPI
Quay lại kỹ năng

smart-web-scraper

bởi mariusfit

Web & Frontend Development
911Lượt tải do clawskills.sh công bố
0Lượt xem
0 lượt thíchĐăng nhập để thích kỹ năng này
—Chưa có đánh giá
Đánh giá của bạn

Tóm tắt

Extract structured data from any web page.

Mô tả

Kỹ năng này làm gì

Extracts structured data from web pages using CSS selectors or automatic detection of tables and lists. Outputs results as JSON, CSV, text, or Markdown. Supports multi-page crawling with pagination following.

Auto-installs its own dependencies via uv, so there is no manual setup before scraping a page.

Khi nào nên dùng

  • Pulling product names and prices from an e-commerce listing
  • Extracting all external links from a documentation site
  • Scraping a pricing table into a spreadsheet-ready CSV
  • Collecting article headlines across multiple paginated pages
  • Grabbing contact details from a directory page

Quy trình ví dụ

ĐẦU VÀO

User asks: extract all products from https://shop.example.com as JSON

AGENT
  1. 1

    Run the extract command with the shop URL and a CSS selector targeting product elements

  2. 2

    Specify JSON output format with the -f json flag

  3. 3

    Save the output to a local file using -o products.json

  4. 4

    Review the resulting JSON array for product text and tag data

ĐẦU RA

A products.json file containing a JSON array with each product's text, tag, and class attributes

Cài đặt

clawhub install mariusfit/smart-web-scraper

Chạy lệnh CLI, hoặc dán prompt vào Claude Code, Cursor, Codex hay coding agent bạn đang dùng.

Liên kết