Một tuần cập nhật liên tục. Dưới đây là những tính năng đã triển khai từ ngày 24 tháng 3 đến ngày 30 tháng 3.
Smart Proxy Routing
Loại task proxy hiện tự động chọn tuyến proxy tối ưu cho từng request. Thay vì xoay vòng proxy ngẫu nhiên, FourA phân tích mức độ bảo vệ của trang web đích và chọn loại proxy phù hợp nhất: data center để tối ưu tốc độ, residential cho các trang web kiểm tra danh tính truy cập, mobile cho các mục tiêu khó nhất.
Các request thất bại sẽ tự động được thử lại qua các tuyến khác. Trong quá trình thử nghiệm của chúng tôi, cơ chế này giúp tăng tỷ lệ thành công trên các trang web có mức độ bảo vệ cao thêm 30-40%.
Đọc thêm về smart proxy routing
Dashboard Analytics
Dashboard hiện đã có thêm phần analytics đầy đủ: lượng request theo thời gian, tỷ lệ thành công theo domain đích, phân vị thời gian phản hồi (p50/p95/p99), và mức tiêu thụ băng thông. Tất cả những gì bạn cần để tối ưu hóa pipeline thu thập dữ liệu của mình.
Đọc thêm về dashboard analytics
Cải thiện tài liệu
Chúng tôi đã mở rộng phần hướng dẫn bắt đầu với các tài liệu mới cho Python, Node.js, Go, và Ruby. Ngoài ra, tài liệu API hiện có đầy đủ ví dụ request/response cho mọi endpoint.
Sửa lỗi
- Đã sửa lỗi tính toán timeout trong browser task khi bộ đếm thời gian
waitForbắt đầu trước khi quá trình điều hướng hoàn tất - Cải thiện thông báo lỗi cho các định dạng URL không hợp lệ (thông báo cũ quá mơ hồ để debug)
- Đã sửa lỗi phân trang trong API danh sách task khi sử dụng bộ lọc
status
Dự kiến vào tuần tới
- API endpoint tại EU để giảm độ trễ truy cập từ Châu Âu
- Trang trạng thái để theo dõi tình trạng dịch vụ theo thời gian thực
- Ra mắt trang tài liệu tích hợp đầy đủ tính năng tìm kiếm
Tuy nhiên, thay đổi quan trọng nhất vẫn là smart proxy routing. Nếu bạn đang xử lý các trang web được bảo vệ, hãy thử chuyển các task của bạn sang loại proxy và để công cụ định tuyến tự động xử lý.