Przedstawiamy Auto: jeden endpoint dla każdego celu
Endpoint Auto wybiera Single, Proxy Finder lub Browser dla każdego requestu, obsługuje zabezpieczenia antybotowe i zwraca sesję do wykorzystania w kolejnym wywołaniu.
Endpoint Auto wybiera Single, Proxy Finder lub Browser dla każdego requestu, obsługuje zabezpieczenia antybotowe i zwraca sesję do wykorzystania w kolejnym wywołaniu.
Określ, które odpowiedzi są sukcesem za pomocą reguł validate. Zaakceptowane odpowiedzi inne niż 200 są teraz prawidłowo rozliczane i widoczne jako sukces w sekcji Activity.
Wdrożyliśmy Playground w Dashboardzie. Wybierz endpoint, wypełnij pola, kliknij Send, skopiuj curl. Trzy endpointy, jeden cookie jar, każdy nagłówek.
4,2 miliona requestów w 24 godziny. Średnio 774 ms, spadek z 2,5 sekundy w poprzednim tygodniu. Oto co zmieniło się w ścieżce requestu, wraz z rzeczywistymi percentylami.
Jedna flaga włącza trzy mechanizmy: prawdziwe nagłówki przeglądarki, pasującą sygnaturę połączenia i automatyczną dekompresję dla gzip i brotli. Oto jak to działa i dlaczego.
API FourA obsługuje teraz konfigurowalne limity przekierowań i surowe odpowiedzi binarne. Dwie opcje, które zmieniają sposób obsługi rzeczywistych przypadków brzegowych podczas scrapowania.
Ponad 70% współczesnych stron internetowych wymaga JavaScript do wyrenderowania treści. Oto jak browser tasks w FourA pozwalają pobrać pełną stronę, gdy żądania HTTP zwracają pustkę.
Liczba requestów, wskaźniki sukcesu, czasy odpowiedzi, podział kosztów na domeny: panel analityczny FourA pokazuje, co działa, a co warto zoptymalizować w następnej kolejności.
FourA automatycznie dobiera teraz najlepszy typ i lokalizację proxy dla każdego żądania na podstawie zabezpieczeń docelowej witryny. Skuteczność wzrosła nawet o 23%.