Intensywny tydzień wdrożeń. Oto co trafiło na produkcję między 24 a 30 marca.
Inteligentny routing proxy
Typ zadań proxy automatycznie wybiera teraz najlepszą trasę proxy dla każdego zapytania. Zamiast losowo rotować serwery proxy, FourA analizuje poziom zabezpieczeń docelowej witryny i dobiera optymalny typ proxy: datacenter dla maksymalnej szybkości, residential dla stron weryfikujących tożsamość klienta oraz mobile dla najbardziej wymagających celów.
Nieudane zapytania są automatycznie ponawiane alternatywnymi trasami. W naszych testach przełożyło się to na wzrost współczynnika sukcesu o 30-40% na silnie zabezpieczonych stronach.
Dowiedz się więcej o inteligentnym routingu proxy
Analityka w dashboardzie
Dashboard zawiera teraz pełną sekcję analityczną: wolumen zapytań w czasie, wskaźniki sukcesu według domen docelowych, percentyle czasu odpowiedzi (p50/p95/p99) oraz zużycie przepustowości. Wszystko, czego potrzebujesz do optymalizacji swojego pipeline'u zbierania danych.
Dowiedz się więcej o analityce w dashboardzie
Usprawnienia w dokumentacji
Rozbudowaliśmy sekcję wprowadzającą o nowe poradniki dla języków Python, Node.js, Go i Ruby. Ponadto referencja API zawiera teraz pełne przykłady request/response dla każdego endpointu.
Poprawki błędów
- Naprawiono błąd obliczania timeoutu w zadaniach przeglądarkowych, gdzie timer
waitForuruchamiał się przed zakończeniem nawigacji - Usprawniono komunikaty błędów dla nieprawidłowych formatów URL (poprzednie były zbyt ogólne, by ułatwić debugowanie)
- Naprawiono paginację w API listy zadań przy użyciu filtra
status
W planach na przyszły tydzień
- Europejski endpoint API dla mniejszych opóźnień z terenu Europy
- Strona statusu do monitorowania stanu usług w czasie rzeczywistym
- Uruchomienie nowej witryny dokumentacji z pełnym wyszukiwaniem
Kluczową nowością pozostaje jednak inteligentny routing proxy. Jeśli pobierasz dane z zabezpieczonych witryn, przetestuj przełączenie zadań na typ proxy i pozwól silnikowi routingu zająć się resztą.