全部文章

网页抓取正在整合。以下是具体变化。

Oxylabs 融资 1.3 亿美元,估值达 36 亿美元。Bright Data 的 ARR 突破 3 亿美元。中端网页抓取 API 正在快速消失。请考虑这五个问题。

独立的网页抓取供应商正在减少

2026年7月9日,Oxylabs 宣布获得 Warburg Pincus 的1.3亿美元投资,估值为36亿美元。其投资组合已经包括 Webshare(2022年收购)和 ScrapingBee(2025年收购)。这不是巧合。这就是目前的市场形态。

中端市场的网页抓取 API 正在消失。不是一家家逐渐消失。而是全面消失。

三年前,在企业级底层(Bright Data,Zyte)和业余级顶层(GitHub 上的 shell 脚本和 proxy 列表)之间,你有十几个可靠的选择。如今,中间的大多数品牌要么已被收购,要么重塑了定位以吸引不同的买家。这种模式非常一致,以至于“18个月后谁拥有这家供应商”现在与正常运行时间和成功率属于同一个评估清单。

以下是实际发生的事情,以及需要关注的问题。

整合模式

数据基础设施领域,2026年估值为11.7亿美元,预计到2031年将达到22.3亿美元,其增长速度足以吸引私募股权资本,但规模又小到1.3亿美元的融资就能重塑它。围绕 Oxylabs 交易的公开框架明确了其意图:为 AI 代理时代的产品开发提供资金,并为更多收购留出空间。也就是说:预计年底前还会有两到四笔中端市场交易。

Oxylabs 并非孤例。Bright Data 报告年化收入超过3亿美元,同比增长50%,这主要受 AI 数据需求的驱动。Zyte 正在发布免费的行业白皮书,并将自己定位为高端市场默认合规的选择。Firecrawl 已经悄悄发布了六种语言(Python,Node.js,Go,Rust,Java,Elixir)的官方 SDK 以及一个 CLI,将自己定位为“为 AI 代理提供的网页数据 API”。这些都不是中立的举动。每一个都是对特定买家群体的争夺。

买家看到的是同类选择的减少。买家没有看到的是(这更重要),当一个曾经独立的产品变成更大投资组合中的一个项目时,动机发生了变化。

你的供应商被收购时你会失去什么

最好的情况:一年内没有任何变化,创始人悄悄离开,路线图围绕母公司的客户群体重新调整优先级,然后某天早上你发现你的定价等级被取消了。

现实情况是:定价策略会向企业级重组。小众漏洞的响应时间会变慢,因为你过去发邮件联系的专家现在要负责三个产品。文档中有一半的地方不再提及旧产品名称。而你的客户经理(如果有的话)在六个月内会更换两次。

我们这么说并非为了贬低收购方。Oxylabs 在收购 ScrapingBee 后的规划是合理的,他们的工程团队实力也很深厚。但如果你最初购买 ScrapingBee 是因为想要最简单的 API 并且排斥企业销售流程,那么你实际购买的是独立性,而不是 endpoint。当 endpoint 保留而独立性消失时,你只留下了外壳,却失去了初衷。

同样的逻辑适用于任何收购。你最初接受的是创始人们愿意捍卫的一系列权衡。新所有者会带来新的权衡。有时更好。但很少完全相同。

全栈方案的推销及其代价

另一个整合故事是垂直方向的,而非横向。每个重量级玩家都在竞相成为“全栈平台”,将 proxy, request, 浏览器渲染, AI 提取, 仪表盘以及 MCP 集成捆绑在一个合同下。

Browserless 的 State of Web Scraping 2026 预测这种趋势将持续:“随着各平台扩展为全栈解决方案,市场将继续整合,从而减少团队需要拼凑的碎片化工具。”这种说法对供应商来说很宽容。从买方角度来看,一份合同也意味着一个定价表,一个漏洞队列,出现故障时只有一个服务中断点,以及一个现在清楚知道他们掌握了你多少基础设施的谈判对手。

全栈确实有优势。计费一致性。更少的集成缝隙。出问题时只需找一个负责人。但这改变了一个特定问题的答案:当技术栈中有一小部分落后于最新技术时,你还能选择替换它吗?全栈平台通常会说可以,然后在暗地里阻止你这么做。

如何在整合时代评估供应商

旧的评估清单大多是技术性的:成功率,延迟,proxy 池大小,单价。这些依然重要,但它们是容易的部分。现在的难点在于意图。

在签署任何协议前,请向供应商提出这五个问题:

  • 18个月后的路线图由谁主导? 如果答案包含“我们无法确定”或“由母公司决定”,那么你已经有答案了。
  • 你们最近三次定价调整是什么,对谁有利? 如果供应商不断更改层级名称并悄悄取消低价套餐,这说明了他们真正想要的客户群体。
  • 给我看一个上个月为月费低于1000美元的客户修复bug的记录。 这可以过滤出针对非重点客户的支持质量。
  • 你们的资金来源是什么,其优化目标是什么? PE支持意味着为退出而增长。创始人所有意味着为独立而增长。两者都合理。但它们并不相同。
  • 如果我们发展超出了你们的服务范围,或者你们被收购,我们该如何解约? 对合作关系有信心的供应商会直接回答。对这个问题感到不适的供应商,本身就说明了问题。

这些都不是陷阱问题。它们只是用来过滤你购买的是产品还是投资组合。

除了这些,我们发布的两篇相关文章也值得一读:为什么proxy池规模在2026年不再重要涵盖了同一个故事的供应商营销层面,而2026年网络数据采集现状则设定了我们工作的大背景。

接下来会发生什么

到2026年及2027年,中端市场将继续萎缩。目前至少有两家二级API优先的供应商将被收购或倒闭。在2024年相信了“独立、开发者优先、无企业级动作”这种说辞的买家,到2027年将需要在一个更小的选择范围中重新做出选择。

好消息是:在这个周期中保持独立的供应商是有意为之的。这是一个值得关注的信号。问问他们为什么没有出售公司。如果答案是“我们不需要”,你可能已经找到了你想要的。

我们在FourA构建网络数据基础设施。我们哪里也不会去,而且我们不需要1.3亿美元才敢这么说。