Събирането на данни в голям мащаб изисква видимост. Трябва да знаете какво работи, какво се проваля и накъде отива бюджетът ви. Новите FourA dashboard анализи ви дават точно това.
Какво ново
Хронология на request-ите
Графика в реално време, показваща обема на вашите request-и във времето, с наслагване на нивата на успеваемост и неуспех. Хронологията може да се филтрира по тип задача (single, browser, proxy) и времеви диапазон (24 часа, 7 дни, 30 дни).
Използвайте я, за да забележите модели: може би процентът ви на успеваемост спада всяка сутрин, когато определен целеви сайт извършва поддръжка, или обемът ви скача в определени дни, когато се изпълняват планирани задачи.
Успеваемост по целеви домейни
Не всички целеви сайтове са еднакви. Някои връщат данни надеждно с обикновена single задача. Други се нуждаят от browser рендериране или proxy ротация, за да успеят последователно.
Прегледът на успеваемостта по домейни ви показва точно къде да насочите усилията си за оптимизация. Ако competitor-a.com има 99% успеваемост, но competitor-b.com е на 72%, знаете, че трябва да проучите competitor-b. Може би се нуждае от различен тип задача или по-специфичен waitFor селектор.
Разпределение на времето за реакция
Вижте вашия профил на латентност с един поглед: p50, p95 и p99 времена за реакция във всички задачи. Графиката на разпределение показва къде се групират вашите request-и и идентифицира отклоненията.
Това е особено полезно при сравняване на типовете задачи. Single задачите обикновено се групират под 1 секунда. Browser задачите варират между 2 и 8 секунди. Ако вашите browser задачи отнемат повече от 15 секунди, вероятно timeout-ът върши работата, така че проверете вашите waitFor селектори.
Bandwidth и разходи
Всеки request прехвърля данни и има свързани разходи. Изгледът за bandwidth показва общия ви трансфер на данни по дни, а разбивката на разходите показва разходите по тип proxy, тип задача и целеви домейн.
Най-честото разкритие: екипите откриват, че използват browser или proxy задачи за сайтове, които работят добре със single. Превключването на тези цели към single може да намали разходите с 50-70% за тези request-и.
Как да използвате анализите ефективно
- Проверявайте ежеседмично. Бърз 5-минутен преглед улавя тенденциите, преди да са се превърнали в проблеми.
- Сортирайте по успеваемост. Коригирайте първо най-лошо представящите се цели. Те хабят най-много request-и (и от бюджета ви).
- Сравнявайте типовете задачи. Ако дадена цел работи със
single, не използвайтеbrowser. И скоростта, и разходите се подобряват. - Настройте известия. Следете за внезапни спадове в успеваемостта, защото те обикновено означават, че целевият сайт е променил нещо.
Налично сега
Таблото за анализи е активно за всички акаунти. Влезте в foura.ai/dashboard, за да проучите вашите данни.
А ето какво забелязахме от първите потребители: повечето екипи откриват поне една бърза победа още при първия си преглед. Обикновено това е група от request-и, използващи browser на сайт, който работи добре със single, или целеви домейн с 60% успеваемост, който просто се нуждае от различен тип задача. Пет минути разглеждане на данните спестява часове изгубени request-и.