AI 爬虫 API - AI 抓取 API

通过一个 API 抓取 AI 搜索引擎的数据。跨 ChatGPT、Gemini、Perplexity、Copilot 和 Google AI Mode 采集提示词、回答文本、回答 HTML、引用、附加链接、国家/地区和回答 URL 等数据。

每月 5,000 条免费记录 · 无需信用卡

探索数千个生产就绪的爬虫工具

仅为成功结果付费,无隐藏费用——代理、解锁、浏览器和重试均已内置。

#1

排名(由 AIMultiple 评定)

99.2%

平均成功率

100M+

每周请求量

超40000万

内置代理 IP

GDPR & CCPA

合规
定价

AI 爬虫 API 定价

只为成功交付的内容付费。无隐藏费用,交付失败不收费。

计算你的成本
每月记录: 5K
$/月
$ 每 1,000 条记录
全部费用。包括代理、解锁和解析。
开始使用
5K
10K
50K
100K
500K
1M
5M
  • 只为成功结果付费,无隐藏费用
  • 每月 5,000 个免费 credits,免费开始
  • 无需预先承诺,可随时取消
  • 7*24 小时专家支持和企业级功能
免费试用
5K
条记录
免费开始
  • 5K 每月记录
  • 无需信用卡
  • 专家支持
体验套餐
$1.5/1千条记录
免费开始
  • 仅按成功计费
  • 可设置每月支出上限
  • 并发不限
  • 专家支持
规模化抓取
$499 /月
免费开始
  • 包含 384,000 条记录
  • 超额数据每 1,000 条 $$1.3
  • 并发不限
  • 可随时取消
  • 专家支持
企业级套餐
定制
联系销售
  • 量大优惠
  • 客户经理
  • 高级服务水平协议
  • 优先支持
  • 单点登录 (SSO)
大多数平台除了按条计费,还会叠加其他费用。使用 Bright Data,每条记录的价格就是您需要支付的全部费用:
计算/运行时单元
通常按爬虫工具运行时长或计算单元计费
已包含
住宅代理带宽
通常按 GB 计费
已包含
存储和数据集保留
通常按 GB/月计费
已包含
数据传输/出站流量
通常按出站 GB 计费
已包含
解锁和 CAPTCHA 解决
通常为付费附加项
已包含
解析为结构化 JSON
通常需要你自行编写代码
已包含
我们接受这些支付方式:Image
工作原理

3 步从零开始获取 AI 数据

无需配置代理,无需管理基础设施。选择、调用并接收数据。
  1. 选择一个爬虫工具

    从上方的 AI 爬虫工具中选择,或在几分钟内使用 AI 创建你自己的爬虫工具。

  2. 调用 API

    一次 API 调用最多支持 5,000 个目标 URL。可使用 Python 和 Node.js SDK、CLI、MCP 服务器或任意 HTTP 客户端。

  3. 获取结构化数据

    接收干净、已解析的 AI 数据,格式支持 JSON、NDJSON 或 CSV。可通过 API、webhook 或云存储交付。

Scraper API Call
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://chatgpt.com/","prompt":"Top hotels in New York","country":"","additional_prompt":"","web_search":false,"geolocation":""},{"url":"https://chatgpt.com/","prompt":"What are the biggest business trends to watch in the next five years?","country":"","additional_prompt":"","web_search":false,"geolocation":"37.7749,122.4194"},{"url":"https://chatgpt.com/","prompt":"Analyze the key factors that influence customer buying decisions in online marketplaces.","country":"","additional_prompt":"","web_search":false,"geolocation":""}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_m7aof0k82r803d5bjm&format=json&uncompressed_webhook=true"
Response payload
[
  {
    "timestamp": "2026-09-15",
    "url": "https:\/\/chatgpt.com\/?q=Why%20does%20Quentin%20Tarantino%20refuse%20to%20watch%20Toy%20Story%204?",
    "prompt": "Why does Quentin Tarantino refuse to watch Toy Story 4?",
    "answer_html": "\u003Chtml class=\u0022xsw4dja xpezmfm x8dqpqg x1uh7rj9 xafyuhj x1nktip0 xl8powd x1it3fuk xh8yej3 x1us19tq xeuugli x101abm8 xliy32...",
    "answer_text": "Quentin Tarantino refuses to watch Toy Story 4 not because he thinks it’s bad , but because he believes Toy Story 3 ende...",
    "links_attached": [
      {
        "position": 1,
        "text": "Toy Story: Quentin Tarantino reveals why he has ‘no desire’ to watch fourth instalment | The Independent",
        "url": "https:\/\/www.the-independent.com\/arts-entertainment\/films\/news\/quentin-tarantino-toy-story-4-b2602232.html?utm_source=cha..."
      },
      {
        "position": 2,
        "text": "Quentin Tarantino Refuses to Watch \u0027Toy Story 4\u0027 Because \u0027Toy Story 3\u0027 Is \u0027One of the Best Movies I\u0027ve Ever Seen\u0027 and th...",
        "url": "https:\/\/au.variety.com\/2024\/film\/global\/quentin-tarantino-toy-stoy-4-ruined-perfect-film-trilogy-17308\/?utm_source=chatg..."
      },
      {
        "position": 3,
        "text": "Quentin Tarantino says he has \u0022no desire\u0022 to watch \u0027Toy Story 4\u0027",
        "url": "https:\/\/www.nme.com\/news\/film\/quentin-tarantino-says-he-has-no-desire-to-watch-toy-story-4-3787538?utm_source=chatgpt.co..."
      },
      {
        "position": 4,
        "text": "Quentin Tarantino Refuses to Watch \u0027Toy Story 4\u0027 Because \u0027Toy Story 3\u0027 Is \u0027One of the Best Movies I\u0027ve Ever Seen\u0027 and th...",
        "url": "https:\/\/au.variety.com\/2024\/film\/global\/quentin-tarantino-toy-stoy-4-ruined-perfect-film-trilogy-17308\/?utm_source=chatg..."
      },
      {
        "position": 5,
        "text": "Toy Story: Quentin Tarantino reveals why he has ‘no desire’ to watch fourth instalment | The Independent",
        "url": "https:\/\/www.the-independent.com\/arts-entertainment\/films\/news\/quentin-tarantino-toy-story-4-b2602232.html?utm_source=cha..."
      },
      {
        "position": 6,
        "text": "Quentin Tarantino says he has \u0022no desire\u0022 to watch \u0027Toy Story 4\u0027",
        "url": "https:\/\/www.nme.com\/news\/film\/quentin-tarantino-says-he-has-no-desire-to-watch-toy-story-4-3787538?utm_source=chatgpt.co..."
      },
      {
        "position": 7,
        "text": "Quentin Tarantino Refuses to Watch \u0027Toy Story 4\u0027 Because \u0027Toy Story 3\u0027 Is \u0027One of the Best Movies I\u0027ve Ever Seen\u0027 and th...",
        "url": "https:\/\/au.variety.com\/2024\/film\/global\/quentin-tarantino-toy-stoy-4-ruined-perfect-film-trilogy-17308\/?utm_source=chatg..."
      }
    ],
    "citations": [],
    "supporting_sources": null
  },
  {
    "timestamp": "2026-09-15",
    "url": "https:\/\/chatgpt.com\/?q=Are%20Liv%20and%20Maddie%20twins%20in%20real%20life?",
    "prompt": "Are Liv and Maddie twins in real life?",
    "answer_html": "\u003Chtml class=\u0022xsw4dja xpezmfm x8dqpqg x1uh7rj9 xafyuhj x1nktip0 xl8powd x1it3fuk xh8yej3 x1us19tq xeuugli x101abm8 xliy32...",
    "answer_text": "No. In Liv and Maddie , both twins are played by the same actress, Dove Cameron . She doesn’t have a twin sister in real...",
    "links_attached": [],
    "citations": [],
    "supporting_sources": null
  },
  {
    "timestamp": "2026-09-15",
    "url": "https:\/\/chatgpt.com\/?q=Is%20rookie%20season%209%20coming%20out?",
    "prompt": "Is rookie season 9 coming out?",
    "answer_html": "\u003Chtml class=\u0022xsw4dja xpezmfm x8dqpqg x1uh7rj9 xafyuhj x1nktip0 xl8powd x1it3fuk xh8yej3 x1us19tq xeuugli x101abm8 xliy32...",
    "answer_text": "Yes! 🎉 The Rookie Season 9 is officially happening. ABC renewed the show in April 2026. [1] The bad news: it won\u0027t prem...",
    "links_attached": [
      {
        "position": 1,
        "text": "What We Know So Far About \u0027The Rookie\u0027 Season 9",
        "url": "https:\/\/people.com\/the-rookie-season-9-everything-to-know-11964558?utm_source=chatgpt.com"
      },
      {
        "position": 2,
        "text": "The Rookie",
        "url": "https:\/\/en.wikipedia.org\/wiki\/The_Rookie?utm_source=chatgpt.com"
      },
      {
        "position": 3,
        "text": "\u0027The Rookie\u0027 Fans, You Must Pay Attention to This Episode Announcement",
        "url": "https:\/\/www.goodhousekeeping.com\/entertainment\/tv-shows\/a73454442\/is-the-rookie-coming-back-2026\/?utm_source=chatgpt.com"
      },
      {
        "position": 4,
        "text": "9 Scripted Network Shows Aren\u0027t Coming Back in Fall 2026. Here\u0027s When They Premiere Instead",
        "url": "https:\/\/people.com\/scripted-network-shows-not-coming-back-fall-2026-12107148?utm_source=chatgpt.com"
      },
      {
        "position": 5,
        "text": "What We Know So Far About \u0027The Rookie\u0027 Season 9",
        "url": "https:\/\/people.com\/the-rookie-season-9-everything-to-know-11964558?utm_source=chatgpt.com"
      },
      {
        "position": 6,
        "text": "\u0027The Rookie\u0027 Fans, You Must Pay Attention to This Episode Announcement",
        "url": "https:\/\/www.goodhousekeeping.com\/entertainment\/tv-shows\/a73454442\/is-the-rookie-coming-back-2026\/?utm_source=chatgpt.com"
      }
    ],
    "citations": [],
    "supporting_sources": null
  },
  {
    "timestamp": "2026-09-15",
    "url": "https:\/\/chatgpt.com\/?q=Where%20can%20I%20watch%20Avatar:%20Fire%20and%20Ash?",
    "prompt": "Where can I watch Avatar: Fire and Ash?",
    "answer_html": "\u003Chtml class=\u0022xsw4dja xpezmfm x8dqpqg x1uh7rj9 xafyuhj x1nktip0 xl8powd x1it3fuk xh8yej3 x1us19tq xeuugli x101abm8 xliy32...",
    "answer_text": "You can watch Avatar: Fire and Ash now on Disney+ . It began streaming on June 24, 2026 . [1] [2] It’s 3 hours 20 minute...",
    "links_attached": [
      {
        "position": 1,
        "text": "Avatar: Fire and Ash Is Now Streaming on Disney+ | Explore Disney+",
        "url": "https:\/\/www.disneyplus.com\/explore\/articles\/avatar-fire-and-ash?utm_source=chatgpt.com"
      },
      {
        "position": 2,
        "text": "Watch Avatar: Fire and Ash on Disney+",
        "url": "https:\/\/www.disneyplus.com\/browse\/entity-3135b0cb-a002-438d-a9fd-60d86284c93f?utm_source=chatgpt.com"
      },
      {
        "position": 3,
        "text": "Avatar: Fire and Ash | Watch on Disney+",
        "url": "https:\/\/www.disneyplus.com\/browse\/entity-3135b0cb-a002-438d-a9fd-60d86284c93f?utm_source=chatgpt.com"
      },
      {
        "position": 4,
        "text": "Avatar: Fire and Ash Is Now Streaming on Disney+ | Explore Disney+",
        "url": "https:\/\/www.disneyplus.com\/explore\/articles\/avatar-fire-and-ash?utm_source=chatgpt.com"
      }
    ],
    "citations": [],
    "supporting_sources": null
  },
  {
    "timestamp": "2026-09-15",
    "url": "https:\/\/chatgpt.com\/?q=Is%20Iron%20Man%20the%20strongest%20Avenger?",
    "prompt": "Is Iron Man the strongest Avenger?",
    "answer_html": "\u003Chtml class=\u0022xsw4dja xpezmfm x8dqpqg x1uh7rj9 xafyuhj x1nktip0 xl8powd x1it3fuk xh8yej3 x1us19tq xeuugli x101abm8 xliy32...",
    "answer_text": "Not quite . 😄 If we\u0027re talking MCU Avengers , Iron Man is one of the most powerful and versatile, but he\u0027s not the stro...",
    "links_attached": [],
    "citations": [],
    "supporting_sources": null
  }
]
免费开始
AI Web 采集器

告诉你的智能体:

Read https://brightdata.com/SKILL.md and get structured JSON for ChatGPT's answer to "Top hotels in New York" via the Web Scraper API (gd_m7aof0k82r803d5bjm): https://chatgpt.com/

或者自己运行:

curl -H "Authorization: Bearer YOUR_API_KEY" -H "Content-Type: application/json" -d '[{"url":"https://chatgpt.com/","prompt":"Top hotels in New York","web_search":false}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_m7aof0k82r803d5bjm&format=json"

或者通过 MCP 连接:

https://mcp.brightdata.com/mcp?token=YOUR_API_KEY
在控制面板中获取带有令牌的 URL
面向编程智能体

将 AI 爬虫工具接入您的智能体

您的智能体可从我们持续维护的 AI 爬虫工具中进行选择。可根据需要随时运行,每次运行都会将实时网络数据直接传送至您的存储系统。适用于 Claude Code、Codex、Cursor 以及任何其他编程智能体。

  • 通过 npx 运行,无需安装任何内容
  • bdata login 会打开浏览器进行身份验证,无需粘贴密钥
  • 指定一个爬虫工具,即可获得 JSON 返回结果
  • 可传送至 AWS · GCP · Azure · Snowflake · Webhook

所需的一切,均已内置

你只为结果付费。代理、渲染、并发和交付始终包含在每个方案中。
Image

直达数据源

每个请求都运行在 Bright Data 基础设施上。400M+ IP、解锁和浏览器均已内置。
Image

即时扩展到数百万页面

发送无限并发请求 - 无需管理基础设施,无需更改配置。
Image

网站变化时爬虫工具会自动修复

AI 驱动的自修复能力可检测网站变化并修复爬虫工具。你的管道持续运行。
Image

数千个已验证爬虫工具

每个爬虫工具均由 Bright Data 构建、测试和维护。无需依赖社区猜测。
Image

按结果付费,无额外费用

每条记录一个价格。代理、重试、渲染、解锁 - 全部包含,无隐藏费用。
Image

合规且提供全面支持

符合 GDPR 和 CCPA。每个方案均提供 7*24 小时人工支持,包括免费方案。
使用场景

AI 网页爬虫工具数据抓取使用场景

为您的企业提供实时 AI 网页爬虫数据洞察。

AI 可见度追踪

提示词
回答文本
引用
按计划运行一组提示词并抓取回答,了解 AI 回答中是否提及您的品牌、如何描述您的品牌,以及同时出现了哪些竞争对手。每次运行的回答都会有所不同,因此只有反复抓取才能衡量可见度,而不是偶然捕捉到一次有利的回答。

引用和来源分析

引用
附加链接
提示词
抓取每个回答背后的引用和链接,了解 AI 引擎在某一主题上依赖哪些域名。该列表是生成式引擎优化的实际目标,因为品牌只有出现在其中,才有机会被引用。

竞争性回答份额

回答文本
提示词
引用
抓取一组提示词的回答,衡量某一类别中各供应商被推荐的频率。长期追踪时,这一指标的表现类似于搜索份额,而且通常会先于自然流量发生变化。

市场和地区对比

国家/地区
提示词
回答文本
在不同国家/地区抓取相同提示词,了解回答和来源如何随市场而变化。措辞和信息来源上的地区差异很难通过人工发现,但这些差异往往能够解释为何一项营销活动在某个市场取得成效,却在另一个市场表现不佳。
将 Bright Data 与其他提供商进行比较

网页爬虫工具 API 与其他提供商对比

功能
其他爬虫服务商
自动扩缩容基础设施
无限制
部分支持
绕过反爬虫机制和验证码
内置
部分支持
住宅代理网络
超过 4 亿个 IP
有限的 IP 池
预构建爬虫工具
超过 1,400 个
50–200 个
自动维护(适应网站变化)
全天候
取决于开发者
定价模式
按记录收取统一价格,包含所有费用
计算资源、代理和存储分别计费
失败的请求
失败不收费,仅成功时付费
通常仍会收费
自定义网站(无预构建爬虫工具)
AI 几分钟内即可完成构建,内置自动修复功能
社区构建的爬虫工具,无服务级别协议(SLA)
合规性(GDPR、CCPA、SOC 2)
完全合规
部分支持
结构化输出(JSON/CSV)
自动生成
支持服务
全天候专家支持,免费套餐也可享有
社区论坛
免费套餐
每月 5,000 条记录
视情况而定

引领合规网页数据采集实践

仅采集公开可用数据。通过 ISO 27001 认证,实施 SOC 2 控制,并符合 GDPR 和 CCPA。每个使用场景均由专属合规与伦理团队审核,并由有文档记录的 Know Your Customer 流程和可接受使用政策提供支持。



Image

AI 爬虫 API 常见问题

AI 爬虫 API 是一款强大工具,专为自动从 AI 网站提取数据而设计,使用户能够高效采集和处理大量数据,用于各种使用场景。

AI 爬虫 API 通过向目标网站发送自动化请求、提取所需数据点并以结构化格式交付数据来工作。该流程可确保数据采集准确且快速。

是的,AI 爬虫 API 旨在符合数据保护法规,包括 GDPR 和 CCPA。它可确保所有数据采集活动均以符合伦理且合法的方式执行。

当然可以!AI 爬虫 API 非常适合竞争分析,让你能够收集有关竞争对手活动、趋势和策略的洞察。

AI 爬虫 API 可与各种平台和工具无缝集成。你可以将其用于现有数据管道、CRM 系统或分析工具,以提升数据处理能力。

是的!每个新的 Bright Data 账户每月都会自动获得 5,000 个免费 credits(价值约 7.50 美元)——无需信用卡、无需促销码,也无需承诺。这些 credits 适用于 Scrapers(包括 AI 爬虫 API),以及网络解锁器 API 和搜索引擎 API。Credits 会在每月 1 日续期,注册后即可立即开始进行 API 调用。

每月 5,000 个免费 credits 用完后,具体情况取决于你的账户余额。如果你已预存资金,服务将按标准 PAYG 费率无缝继续,不会中断。如果没有预存资金,请求将返回错误,直到你充值或 credits 在次月 1 日续期。请注意,未使用的免费 credits 不会结转。

为避免服务中断,你可以在 brightdata.com/cp/billing/settings 的账单设置中启用自动充值。

AI 爬虫 API 没有特定使用限制,可让你根据需要灵活扩展。

是的,我们为 AI 爬虫 API 提供专属支持。我们的支持团队全天候 24/7 为你提供帮助,解答你在使用 API 时可能遇到的任何问题。

Amazon S3、Google Cloud Storage、Google PubSub、Microsoft Azure Storage、Snowflake 和 SFTP。

JSON、NDJSON、JSON lines、CSV 和 .gz 文件(压缩)。

规模化抓取 AI 数据的最简单方式