Сбор данных в больших масштабах требует прозрачности. Вам нужно знать, что работает, что дает сбои и куда уходит бюджет. Новая аналитика в панели управления FourA дает именно это.
Что нового
Хронология request
Интерактивный график в реальном времени показывает объем request с наложением доли успешных и неуспешных ответов. Хронологию можно фильтровать по типу задачи (single, browser, proxy) и временному диапазону (24 часа, 7 дней, 30 дней).
Используйте его для выявления закономерностей, например, когда доля успешных ответов снижается каждое утро из-за технических работ на целевом сайте, или когда объем резко возрастает в определенные дни при запуске запланированных задач.
Доля успешных ответов по целевым доменам
Не все целевые сайты одинаковы. Некоторые стабильно возвращают данные при простой задаче single. Другим для стабильного успеха требуется рендеринг browser или ротация proxy.
Статистика успешных ответов по доменам показывает, на чем именно сосредоточить усилия по оптимизации. Если у competitor-a.com доля успешных ответов составляет 99%, а у competitor-b.com всего 72%, вы понимаете, что нужно изучить competitor-b. Возможно, для него требуется другой тип задачи или более точный селектор waitFor.
Распределение времени отклика
Оцените профиль задержки с первого взгляда, включая время отклика p50, p95 и p99 по всем задачам. График распределения показывает концентрацию ваших request и выявляет аномалии.
Это особенно полезно при сравнении типов задач. Задачи single обычно группируются в пределах 1 секунды. Задачи browser распределяются между 2 и 8 секундами. Если ваши задачи browser занимают более 15 секунд, скорее всего, срабатывает таймаут, поэтому проверьте селекторы waitFor.
Пропускная способность и стоимость
Каждый request передает данные и имеет свою стоимость. Вкладка пропускной способности показывает общий объем переданных данных по дням, а детализация расходов отображает затраты по типу proxy, типу задачи и целевому домену.
Самое частое открытие заключается в том, что команды обнаруживают использование задач browser или proxy на сайтах, которые отлично работают с single. Переключение этих целей на single может снизить затраты на такие request на 50-70%.
Как эффективно использовать аналитику
- Проверяйте еженедельно. Быстрый 5-минутный анализ позволяет заметить тенденции до того, как они станут проблемами.
- Сортируйте по доле успешных ответов. Исправляйте наименее эффективные цели в первую очередь. Они расходуют больше всего request (и вашего бюджета).
- Сравнивайте типы задач. Если цель работает с
single, не используйтеbrowser. Это улучшит и скорость, и стоимость. - Настройте алерты. Следите за внезапными падениями доли успешных ответов, так как обычно это означает, что целевой сайт изменился.
Уже доступно
Панель аналитики уже доступна для всех аккаунтов. Войдите в foura.ai/dashboard, чтобы изучить свои данные.
Вот что мы заметили по первым пользователям, большинство команд находят как минимум одну возможность для быстрой оптимизации при первом же просмотре. Обычно это группа request, использующих browser на сайте, который отлично работает с single, или целевой домен с 60% успешных ответов, которому просто нужен другой тип задачи. Пять минут анализа данных экономят часы потраченных впустую request.