本周发布内容密集。以下是 3 月 24 日至 3 月 30 日期间上线的更新。
智能 Proxy 路由
proxy 任务类型现在会自动为每个 request 选择最佳 proxy 路由。FourA 不再随机轮换 proxy,而是分析目标网站的防护级别并挑选最优的 proxy 类型:追求速度选择数据中心,针对验证请求来源的站点选择住宅,针对防护最严格的目标选择移动端。
失败的 request 会自动通过不同路由重试。在我们的测试中,这使高防护站点的成功率提升了 30-40%。
控制台分析
控制台现已包含完整的分析板块:随时间变化的 request 数量、按目标域名划分的成功率、response 时间分位数(p50/p95/p99)以及带宽消耗。满足优化数据采集管道所需的一切功能。
文档改进
我们扩充了入门指南部分,新增了针对 Python、Node.js、Go 和 Ruby 的指南。此外,API 参考文档现已包含每个 endpoint 的完整 request/response 示例。
漏洞修复
- 修复了浏览器任务中的超时计算问题,此前
waitFor计时器在导航完成前就会启动 - 改进了无效 URL 格式的错误提示(旧提示过于模糊,难以排查)
- 修复了使用
status过滤器时任务列表 API 的分页问题
下周即将推出
- 欧洲 API endpoint,用于降低欧洲地区的访问延迟
- 状态页面,用于实时监控服务健康状况
- 支持全文搜索的文档网站上线
最重要的更新是智能 proxy 路由。如果你正在抓取受防护的站点,请尝试将任务切换到 proxy 类型,让路由引擎自动处理。