本周发布内容非常充实。以下是 3 月 24 日至 3 月 30 日期间上线的功能。
智能 proxy 路由
proxy 任务类型现在会自动为每个 request 选择最佳的 proxy 路由。FourA 不再随机轮询 proxy,而是分析目标网站的防护级别并挑选最合适的 proxy 类型:数据中心型追求速度,住宅型追求隐蔽,移动型应对最难处理的目标。
失败的 request 会自动通过其他路由进行重试。在我们的测试中,这使高防护网站的请求成功率提升了 30-40%。
控制面板分析
控制面板现在包含一个完整的分析板块:历史 request 量、目标域名的成功率、响应时间百分位数(p50/p95/p99)以及带宽消耗。满足你优化数据采集流水线所需的一切。
文档改进
我们扩展了入门指南部分,新增了针对 Python、Node.js、Go 和 Ruby 的教程。此外,API 参考文档现在为每个 endpoint 都提供了完整的 request/response 示例。
Bug 修复
- 修复了浏览器任务中的超时计算问题,即
waitFor定时器在导航完成前就已启动的问题 - 改进了无效 URL 格式的错误提示(旧提示过于含糊,难以调试)
- 修复了在使用
status过滤器时,任务列表 API 中的分页问题
下周预告
- 欧盟 API endpoint,为欧洲地区提供更低延迟的访问
- 状态页,用于实时监控服务健康状况
- 推出支持全文搜索的文档网站
不过最重磅的更新还是智能 proxy 路由。如果你正在抓取受保护的网站,不妨尝试将任务切换为 proxy 类型,让路由引擎来处理其余的工作。