连接层信号是 Bot 检测的基线
98.6%。
这是一个 CatBoost 模型仅使用连接层特征达到的分类准确率。没有 header,没有 IP,没有行为。只有初始握手的形态。这篇 arXiv 论文发表于 2026 年 2 月,且该结果并非特例。Cloudflare、AWS、VirusTotal 和 Akamai 都在生产环境中运行连接层指纹识别。如果你在 2026 年使用普通的 HTTP 客户端进行抓取,那么在你的 request 到达应用层之前,判决就已经下达了。
这是大多数 bot 检测教程跳过的部分。多数关于反 bot 绕过的文章仍围绕 User-Agent 轮换、cookie 和 CAPTCHA 展开。这些是容易应对的层级。但你无法用 header 伪装连接层。
指纹实际看到了什么
连接层指纹是初始握手消息的哈希值。它对协议(TCP 或 QUIC)、版本、SNI 存在情况、排序的密码套件、扩展、签名算法和 ALPN 进行编码。两个声称是同一个浏览器的客户端会生成相同的哈希值。一个声称是 Chrome 的 Python requests 脚本产生的指纹,除了在爬虫中,在世界上任何地方都不存在。
当前这一代指纹解决了上一代的最大弱点:扩展排列(主流浏览器在 2023 年引入该机制以打破初级指纹识别)。新设计对扩展进行排序并计数,因此随机化无济于事。这里没有简单的逃生通道。
Akamai 披露通过跨层分析实现了 92-98% 的 bot 分类准确率。跨层部分很关键。仅连接层信号就占据主导地位,但将其与 HTTP/2 帧排序、header 顺序和 request 计时相结合,会将误报率压低到大多数爬虫无法承受的水平。
后量子的转折
这是没人预料到的部分。在 2026 年 1 月 31 日,Akamai 将后量子密钥交换设为默认选项,应用于所有连接。到 2026 年初,57.4% 由真实浏览器发起的连接包含了 X25519MLKEM768 密钥份额。Chrome 的 PQ 支持率约为 93%。Firefox 为 85%。Safari 正在推出。
PQ 密钥份额很大。相比经典 X25519 的 36 字节,它达到了 1,124 字节。初始握手消息从 300 到 500 字节增长到超过 1,400 字节。这种增长体现在连接层指纹、数据包捕获以及 WAF 的被动观察中。
如果你的爬虫客户端不包含 PQ 密钥份额,那么你声明的特征是当前任何 Chrome 或 Firefox 都不会有的。2026 年第一季度的两个 CVE 准确地标记了这种不匹配:CVE-2026-26995(填充扩展)每次 request 带来 25-50% 的检测概率,而 CVE-2026-27017(ECH 和 GREASE 不匹配)约为 50%。在整个会话中结合起来,暴露风险几乎变成必然。
这是一个 12 个月的问题变成了 3 个月的问题。大多数开源爬虫技术栈尚未提供兼容 PQ 的握手。那些已经提供的,比实际浏览器版本落后数周。
为什么 proxy 无法解决这个问题
流传着一种令人欣慰的说法,即更大的 proxy 池能解决现代 bot 检测。事实并非如此。Security Boulevard 报道的 2026 年 1 月黄牛事件 跨越 390 万个唯一 IP 发起了 1600 万次 request。基于 IP 的封锁毫无用处。真正有效的防御主要是连接层和行为指纹识别。
住宅 proxy 的经济学也在本季度崩溃了。Help Net Security 在 2026 年 4 月报道,1 月份 IPIDEA 网络的瘫痪使行业住宅容量在一夜之间减少了约 40%。Bright Data 和 Oxylabs 的专利诉讼(最高法院于 2026 年 2 月 23 日驳回了 Bright Data 的上诉,审判于 5 月 18 日进行)与这种容量冲击相比只是个小插曲。追逐住宅 IP 作为指纹防御手段的买家,正在为一个 WAF 并不关心的答案支付更多费用。
proxy 依然重要,只是并非出于大多数人认为的原因。地理分布和 ISP 类型决定了路由决策和 rate limit 配置文件。它们无法帮你撑过握手阶段。
这对数据团队意味着什么
如果你在 2026 年构建或购买爬虫基础设施,有三件事发生了改变。
首先,连接层协议栈现在是一个硬性要求。任何与当前浏览器握手(PQ 密钥份额、扩展排序、ALPN、签名算法)不匹配的客户端,都会产生一个被高置信度分类为 bot 的指纹。用更好的 header 包装 Python requests 解决不了任何问题。传输层就会暴露一切。
其次,headless 浏览器检测变得更糟,而不是更好。Browserless 的《2026 年网页抓取现状》报告指出,headless 与有头浏览器实例之间的差距正在扩大。反 bot 供应商已经记录了指纹差异,并在客户站点之间近乎实时地共享威胁情报。在 12 月能够运行的 headless 实例,到了 5 月可能会被归类为 bot。行为信号叠加在传输层之上,且两者都是移动的目标。
第三,自建与购买的经济学权衡发生了改变。维护一个与移动目标匹配的连接签名(浏览器每隔几周发布一次 PQ 更新,扩展顺序在次要版本间变动,密码套件偏好转移)现在是一项全职工作。在 2024 年花费 20% 工程师时间进行爬虫维护的团队,在 2026 年花费了超过半个人力。我们之前 曾撰文说明为什么爬虫总是失效。在 2026 年,答案更多是“传输层”而非“DOM”。
最廉价的爬虫是不被分类出来的爬虫
有趣的预测并非反 bot 供应商是否会继续提高标准。他们会的。有趣的预测是,在 98% 的准确率成为检测基线的市场中,哪些抓取工具能够幸存下来。
大多数不会。但存活下来的工具会将握手视为 request 的一部分,而非单纯的传输细节。买家将开始向供应商提出一个 12 个月前不在评估清单上的问题:你们提供的连接签名是什么,更新速度有多快?
在 request 有机会展示自身之前,握手就已经一锤定音。