Proxy Port: Таргетиране и сесии в потребителското име
FourA proxy портът чете мрежа, държава и sticky сесии от потребителското име, а правописна грешка връща 400 с валидните ключове. Ето пълната граматика.
Browser Profiles: Изберете как да изглеждат вашите requests
Задайте браузъра, операционната система и версията за всяка request от публичен каталог с 79 измерени профила. Когато сайт отхвърли даден профил, ротацията го сменя автоматично.
Представяме Auto: Един endpoint за всяка цел
Крайният Auto endpoint избира Single, Proxy Finder или Browser за всяка заявка, обработва страници с проверки за автентичност и връща сесия, която следващото ви повикване може да преизползва.
Правилата за validate вече определят какво се счита за success
Декларирайте кои responses се считат за success с помощта на правила за validate. Не-200 responses, които приемате, вече се таксуват правилно и се показват като success във вашия Activity feed.
The Playground: Създавайте и тествайте requests във вашия Dashboard
Добавихме Playground в Dashboard. Изберете endpoint, попълнете полетата, натиснете Send, копирайте curl. Три endpoints, един cookie jar, всеки header.
Намаляване на времето за response от 2.5s до под секунда при 4.2M requests
4.2 милиона requests за 24 часа. Средно 774 ms, спад от 2.5 секунди през предходната седмица. Ето какво се промени в request path, с реални персентили.
Вътре в профила на браузъра: Какво всъщност прави `unblocker: true`
Един флаг превключва три опции: реални хедъри на браузъра, съвпадаща сигнатура на връзката и автоматична декомпресия за gzip и brotli. Ето какво прави и защо.
Контрол на пренасочванията и Raw Buffer режим
API-то на FourA вече поддържа конфигурируеми лимити за пренасочване и сурови двоични отговори. Две опции, които променят начина, по който се справяте с реални крайни случаи при скрейпинг.
Browser Tasks: Как да скрапваме сайтове с интензивно използване на JavaScript
Над 70% от съвременните уебсайтове изискват JavaScript, за да рендерират съдържанието си. Ето как browser tasks на FourA ви осигуряват пълната страница, когато HTTP requests връщат празен резултат.
Dashboard анализи и данни за потреблението
Обем на request-и, нива на успеваемост, времена за реакция, разбивка на разходите по домейни: FourA dashboard за анализи показва какво работи и къде да оптимизирате след това.