Web Scraper API
网络抓取器 API 的交付 API
了解如何使用 Bright Data 的交付 API 通过网络抓取器 API 下载、交付并管理数据快照,并存储到各种存储解决方案,包括 S3、Azure 等。
下载快照
端点:GET /datasets/v3/snapshot/: snapshot_id
下载数据收集结果(快照必须处于就绪状态 status=ready
)
路径参数
snapshot_id
触发收集时返回的 ID
示例:
s_lynh132v19n82v81kx
查询参数
压缩
结果是否应该压缩
示例:
压缩=true
batch_size
分成 X 条记录的批次
示例:
batch_size=1000
至少 1000 条记录
部分
如果提供了 batch_size,请指定要下载的部分
示例:
部分=1
将收集的数据传送到存储
端点:POST /datasets/v3/交付/: snapshot_id
将收集的数据直接传送到您指定的存储位置。
Was this page helpful?