Download a crawl job's results as JSON or CSV
diffbot.x.crawl-dataDownloads the extracted results of a crawl job as JSON or CSV, or a diagnostic URL report
- Price
- 가격 미정제공업체 원가
- Success rate
- —성공률 데이터가 아직 없습니다Last 30 days · 0 calls
- Latency p50
- ——
- Last verified
- —Not verified yet
GEThttps://toolswitch.dev/v1/tools/diffbot.x.crawl-dataPreviewTry online출시 예정Provider docs ↗
- Uses platform quota
- Synchronous response
- Reads public data
파라미터
different HOST than base_url — api.diffbot.com
| 파라미터 | 유형 | 필수 | 설명 | 예시 |
|---|---|---|---|---|
| 쿼리 파라미터 | ||||
num | 정수 | 선택 | limit to N most-recently-processed URLs | |
name | 문자열 | 필수 | which crawl job's data to download | test-crawl |
type | 문자열 | 선택 | 'urls' returns a diagnostic URL Report in CSV instead of extraction output | |
format | 문자열 | 선택 | 'csv' for CSV (top-level fields only); default json | |
- 쿼리 파라미터
num정수선택limit to N most-recently-processed URLs
name문자열필수which crawl job's data to download
예시:
test-crawltype문자열선택'urls' returns a diagnostic URL Report in CSV instead of extraction output
format문자열선택'csv' for CSV (top-level fields only); default json
코드 예제
$TOOLSWITCH_KEY를 콘솔에서 생성한 키로 바꾸세요.
Preview
curl -X GET 'https://toolswitch.dev/v1/tools/diffbot.x.crawl-data' \
-H "X-Toolswitch-Key: $TOOLSWITCH_KEY"import os
import requests
response = requests.request(
"GET",
"https://toolswitch.dev/v1/tools/diffbot.x.crawl-data",
headers={"X-Toolswitch-Key": os.environ["TOOLSWITCH_KEY"]},
)
response.raise_for_status()
print(response.text)const response = await fetch("https://toolswitch.dev/v1/tools/diffbot.x.crawl-data", {
method: "GET",
headers: {
"X-Toolswitch-Key": process.env.TOOLSWITCH_KEY ?? "",
},
});
if (!response.ok) throw new Error(`Request failed: ${response.status}`);
console.log(await response.text());게이트웨이 API는 미리보기 버전이며 URL과 인증 방식이 변경될 수 있습니다. 예제 매개변수는 샘플 데이터입니다.