Skip to main content
POST
使用 Fetch API 按 URL 抓取任意网页
Fetch API(原 Crawl API)是 Web Unlocker API 在 Scraper API 中的对应产品。发送任意公开 URL,即可在一条记录中获取该网页的 Markdown、纯文本、原始 HTML 和 JSON-LD。

查询参数

string
默认值:"gd_m6gjtfmeh43we6cqc"
必填
用于此请求的数据集 ID。
必须设置为 gd_m6gjtfmeh43we6cqc 才能采集 Fetch API - 按 URL 采集 数据。
boolean
默认值:false
请求完成时是否发送通知。
boolean
默认值:true
是否在响应中包含错误。
string
仅返回列出的输出字段,字段之间用竖线(|)分隔。例如,url|markdown 仅返回 URL 和网页的 Markdown 版本。

请求体

object[]
必填
输入对象数组。

示例

输出字段

每条记录包含以下字段: 如只需要部分字段,请设置 custom_output_fields,例如 custom_output_fields=url|markdown。