工作原理
你向 Bright Data X Scraper API 发送一个或多个 X(前身为 Twitter)URL。Bright Data 负责处理抓取基础设施,并返回干净、结构化的 JSON。dataset_id 来指定数据类型(个人主页或帖子),并以 JSON、NDJSON 或 CSV 格式返回结果。
响应内容示例
Bright Data X (Twitter) Scraper API 返回的单条记录。可在快速开始中亲自发送该请求。支持的数据类型
个人主页
粉丝数、简介、认证状态、头像图片。可通过用户名发现个人主页。
帖子
帖子文本、点赞、转发、回复、媒体和话题标签。可通过个人主页 URL 发现帖子。
请求方式
Bright Data Scraper API 支持两种请求方式,请根据您的数据量和延迟需求选择。
详见了解同步与异步请求。
功能与限制
常见问题
数据是实时抓取的吗?
数据是实时抓取的吗?
是的。每次请求都会触发一次实时抓取。没有缓存或过时的数据。响应时间因端点而异:个人主页通常在 10-30 秒内返回(同步),而发现类请求可能需要更长时间,具体取决于结果数量。
URL 采集与发现有什么区别?
URL 采集与发现有什么区别?
URL 采集 抓取你提供的特定 X 页面(例如个人主页 URL)。发现 查找符合搜索条件的 X 内容(例如某个个人主页 URL 的所有帖子)并抓取结果。发现功能仅通过异步请求提供。
与使用代理或 Web Unlocker 抓取有何不同?
与使用代理或 Web Unlocker 抓取有何不同?
使用代理或 Web Unlocker 抓取时,您仍需编写和维护自己的解析逻辑,并在目标网站页面结构变化时随时更新。Bright Data Scraper API 处理整个链路:代理轮换、反爬绕过与解析。您只需发送 URL 或关键词,即可获得干净的结构化 JSON,无需自建抓取基础设施或维护解析器。
后续步骤
快速开始
5 分钟内抓取你的第一个 X 个人主页。
发送你的第一个请求
包含 cURL、Python 和 Node.js 的完整代码示例。
API 参考
端点规格、参数和响应模式。