Một tuần bận rộn với nhiều đợt phát hành. Dưới đây là những cập nhật đã hoạt động từ ngày 24 đến ngày 30 tháng 3.
Định tuyến proxy thông minh
Loại task proxy hiện tự động chọn tuyến proxy tốt nhất cho mỗi request. Thay vì xoay vòng qua các proxy một cách ngẫu nhiên, FourA phân tích mức độ bảo vệ của trang web mục tiêu và chọn loại proxy tối ưu: data center để tối ưu tốc độ, residential để ẩn danh, mobile cho các mục tiêu khó tiếp cận nhất.
Các request bị lỗi sẽ tự động được thử lại qua các tuyến khác nhau. Trong quá trình thử nghiệm của chúng tôi, cơ chế này đã cải thiện tỷ lệ thành công trên các trang web được bảo mật nghiêm ngặt thêm 30-40%.
Đọc thêm về định tuyến proxy thông minh
Phân tích trên Dashboard
Dashboard hiện đã tích hợp một phần phân tích đầy đủ: lưu lượng request theo thời gian, tỷ lệ thành công theo domain mục tiêu, phân vị thời gian phản hồi (p50/p95/p99) và lượng băng thông tiêu thụ. Mọi thứ bạn cần để tối ưu hóa pipeline thu thập dữ liệu của mình.
Đọc thêm về phân tích trên dashboard
Cải tiến tài liệu
Chúng tôi đã mở rộng phần hướng dẫn bắt đầu (getting-started) với các tài liệu mới cho Python, Node.js, Go và Ruby. Ngoài ra, tài liệu tham khảo API hiện đã bao gồm các ví dụ request/response đầy đủ cho mọi endpoint.
Sửa lỗi
- Khắc phục lỗi tính toán timeout trong các task trình duyệt khi bộ đếm thời gian
waitForbắt đầu trước khi quá trình điều hướng hoàn tất - Cải thiện thông báo lỗi cho các định dạng URL không hợp lệ (các thông báo cũ quá mơ hồ để debug)
- Sửa lỗi phân trang trong API danh sách task khi sử dụng bộ lọc
status
Sắp ra mắt tuần tới
- Endpoint API tại EU để truy cập với độ trễ thấp hơn từ châu Âu
- Trang trạng thái (status page) để theo dõi sức khỏe dịch vụ theo thời gian thực
- Ra mắt trang tài liệu tích hợp tính năng tìm kiếm đầy đủ
Nhưng cập nhật lớn nhất vẫn là định tuyến proxy thông minh. Nếu bạn đang gặp khó khăn với các trang web được bảo vệ, hãy thử chuyển các task của mình sang loại proxy và để công cụ định tuyến tự động xử lý.