Bright Data Web Scraper API 使您能够触发采集以实现自动化网页数据提取。
在 Authorization header 中使用 Bright Data API Key 作为 Bearer token。
获取 API Key: https://brightdata.com/cp/setting/users。
示例:
Authorization: Bearer b5648e1096c6442f60a6c4bbbe73f8d2234d3d8324554bd6a7ec8f3f251f07df
您的 dataset ID。
"gd_m6gjtfmeh43we6cqc"
在结果中包含错误报告。若将 "include_errors" 设置为 true,您将收到有关数据收集过程中发生的所有错误的详细报告。
true
"custom_output_fields" 参数用于筛选响应数据,仅返回指定字段。您可以使用竖线 (|) 分隔所需的输出列。
例如,如果您只想在响应中包含 URL 和上次更新日期,可以将参数设置为 "url|about.updated_on"。这允许您根据需求自定义返回的数据字段。
"url|about.updated_on"
您可以使用 JSON 或 CSV 格式提供输入数据。输入内容指定抓取器所需的 URL 或其他参数。
属性依据 dataset 的需求而变化。最常见的是 'url' 字段。
示例:[{"url":"https://www.airbnb.com/rooms/50122531"},{"url":"https://www.airbnb.com/rooms/50127677"}]
[
{
"url": "https://www.airbnb.com/rooms/50122531"
},
{
"url": "https://www.airbnb.com/rooms/50127677"
}
]任务已成功启动。
Snapshot ID 是用于识别特定数据快照的唯一标识符,可用于获取通过 API 触发的抓取任务的结果。了解更多:Snapshot ID。
"s_m4x7enmven8djfqak"