İçeriğe geç
TakoAPI
Becerilere dön

smart-web-scraper

mariusfit tarafından

Web & Frontend Development
911İndirme sayıları clawskills.sh tarafından bildirilir
0Görüntülenmeler
0 beğeniBu beceriyi beğenmek için giriş yapın
—Henüz değerlendirilmedi
Puanınız

Özet

Extract structured data from any web page.

Açıklama

Bu Beceri Ne Yapar

Extracts structured data from web pages using CSS selectors or automatic detection of tables and lists. Outputs results as JSON, CSV, text, or Markdown. Supports multi-page crawling with pagination following.

Auto-installs its own dependencies via uv, so there is no manual setup before scraping a page.

Ne Zaman Kullanılır

  • Pulling product names and prices from an e-commerce listing
  • Extracting all external links from a documentation site
  • Scraping a pricing table into a spreadsheet-ready CSV
  • Collecting article headlines across multiple paginated pages
  • Grabbing contact details from a directory page

Örnek İş Akışı

GİRİŞ

User asks: extract all products from https://shop.example.com as JSON

AJAN
  1. 1

    Run the extract command with the shop URL and a CSS selector targeting product elements

  2. 2

    Specify JSON output format with the -f json flag

  3. 3

    Save the output to a local file using -o products.json

  4. 4

    Review the resulting JSON array for product text and tag data

ÇIKIŞ

A products.json file containing a JSON array with each product's text, tag, and class attributes

Kurulum

clawhub install mariusfit/smart-web-scraper

CLI komutunu çalıştırın ya da istemi Claude Code, Cursor, Codex veya kullandığınız kodlama ajanına yapıştırın.

Bağlantılar