SpiderWeb・SEO データSEO/AEO

Crawl a website

spidercloud.web.crawl

Follow links from a starting URL and return a bounded set of pages.

Price: 価格未定プロバイダー原価
Success rate: —成功率データはまだありませんLast 30 days · 0 calls
Latency p50: ——
Last verified: 2026/09/29Verified working

POSThttps://toolswitch.dev/v1/tools/spidercloud.web.crawlPreview

Try online近日公開Provider docs ↗

Uses platform quota
Synchronous response
Reads public data

パラメータ

このツールにパラメータはありません。プロバイダのドキュメント ↗ を参照してください Provider docs

コード例

$TOOLSWITCH_KEY をコンソールで作成したキーに置き換えてください。

Preview

curl -X POST 'https://toolswitch.dev/v1/tools/spidercloud.web.crawl' \
  -H "X-Toolswitch-Key: $TOOLSWITCH_KEY" \
  -H "Content-Type: application/json" \
  --data-raw '{"url":"https://example.com","depth":1,"limit":1,"request":"http","return_format":"markdown"}'

import os
import json
import requests

response = requests.request(
    "POST",
    "https://toolswitch.dev/v1/tools/spidercloud.web.crawl",
    headers={"X-Toolswitch-Key": os.environ["TOOLSWITCH_KEY"]},
    json=json.loads("{\"url\":\"https://example.com\",\"depth\":1,\"limit\":1,\"request\":\"http\",\"return_format\":\"markdown\"}"),
)
response.raise_for_status()
print(response.text)

const response = await fetch("https://toolswitch.dev/v1/tools/spidercloud.web.crawl", {
  method: "POST",
  headers: {
    "X-Toolswitch-Key": process.env.TOOLSWITCH_KEY ?? "",
    "Content-Type": "application/json",
  },
  body: JSON.stringify(JSON.parse("{\"url\":\"https://example.com\",\"depth\":1,\"limit\":1,\"request\":\"http\",\"return_format\":\"markdown\"}")),
});
if (!response.ok) throw new Error(`Request failed: ${response.status}`);
console.log(await response.text());

このゲートウェイ API はプレビュー版です。URL や認証方式は変更される場合があります。パラメータはサンプルデータです。