← Все статьи

Мониторинг цен в Черную пятницу с учетом правила 30 дней

Мониторинг цен в Черную пятницу по правилу 30 дней в ЕС опирается на одно число: минимальную цену. Один пропущенный или неверно прочитанный день решает все. Рассказываем, как ее собирать.

В марте 2026 года органы по защите прав потребителей из 23 стран ЕС, а также Исландии и Норвегии опубликовали результаты проверки распродаж на Black Friday и Cyber Monday: 30% из 314 проверенных интернет-магазинов некорректно указывали скидки. Правило, которое нарушили эти магазины, укладывается в одно предложение. Чтобы проверить его соблюдение, нужны данные, сбор которых следовало начать за месяц до распродажи.

Задача

Согласно Директиве ЕС об указании цен (Price Indication Directive), магазин, объявляющий о снижении цены, обязан указывать в качестве базовой самую низкую цену, действовавшую за последние 30 дней. Директива Omnibus добавила это требование в 2019 году, и магазины обязаны соблюдать его с 2022 года. В этом году Black Friday выпадает на 27 ноября, поэтому окно, определяющее честность зачеркнутой цены, открылось 28 октября. Трекер, запущенный в момент появления баннеров, опоздал на месяц.

Собственный мониторинг Еврокомиссии, построенный с помощью Apify, охватил 16 000 товаров в 176 магазинах в рамках проверки Black Friday 2022 года, а к октябрю 2025 года помог проверить 136 931 товар у 1 556 ритейлеров. Система собирала цены во время распродажи и за 30 дней до нее, сохраняя скриншот каждой страницы в качестве доказательства. Oxylabs реализовала версию для США в 2024 году: компания отслеживала 61 172 товара каждый час начиная с 13 августа, и только 4 529 из них одновременно продавались на Black Friday и оставались в каталоге в течение 90 дней, как того требовала методология. Ротация товарных списков происходит быстрее, чем закладывает большинство команд.

Однако сложность заключается не в масштабе. Сложность в статистике.

Базовая цена представляет собой минимум, а минимум определяется одним-единственным наблюдением. Среднее значение нивелирует один сбойный день; минимум и есть этот день. Вот почему обе типичные ошибки скрапера искажают итоговый вердикт:

  • Пропущенный день скрывает минимум. Страница возвращает экран проверки, форму согласия на cookies или тайм-аут именно в тот день, когда цена упала. Расчетный минимум оказывается выше реального, и фиктивная скидка выглядит честной.
  • Неправильно прочитанная цена создает ложный минимум. Парсер извлекает цену «от», стоимость для участников программы лояльности, цену другого варианта товара или аксессуара из карусели. Расчетный минимум оказывается ниже реального, и честная скидка помечается как нарушение.

Снижения цен могут быть кратковременными. В своем исследовании Black Friday 2025 года организация Which? отслеживала 175 товаров у восьми ритейлеров в Великобритании в течение года: 83% из них стоили столько же или дешевле хотя бы один раз вне четырехнедельного периода распродаж, а цена одного отслеживаемого телевизора ненадолго упала с £1,039 до £999 на следующий день после Black Friday. (В Великобритании действуют свои правила, но для скрейпера однодневный спад выглядит одинаково.)

Для сайта со скидками первая ошибка стоит доверия. Для регулятора, группы защиты прав потребителей или редакции СМИ вторая означает обвинение ритейлера в том, чего он не делал.

Подход: пропуск остается пропуском

Вам нужен уровень сбора данных, который никогда не превращает неудачный fetch в число, и расчет, который отказывается выносить вердикт по интервалу с пробелами. Мы разбирали, как сбой при выборке превращается в ложный сигнал, в статье Alternative Data: When a Block Looks Like a Data Point; 30-дневный минимум представляет собой наиболее жесткий вариант этой проблемы.

С такой платформой, как FourA, задействовано минимум компонентов:

  • Проверяйте страницу перед ее чтением. Параметр validate принимает строку, присутствующую только на нужной странице товара, например артикул самого продукта. Страница с проверкой (challenge page), страница "товар не найден" или экран согласия возвращаются как неудачный вызов, который не тарифицируется, потому что ваше правило определяет, что считать успехом. В вашей строке появляется пропуск, а не цена.
  • Сохраняйте подтверждение. Ответы содержат X-FourA-Request-Id. Сохраняйте его вместе с ценой, меткой времени и исходным HTML. Наш журнал Activity хранит предварительный просмотр запросов только 24 часа, поэтому архив доказательств должен находиться на вашей стороне.
  • Выбирайте endpoint под конкретный магазин. Single обрабатывает страницы товаров с серверным рендерингом. Browser предназначен для магазинов, формирующих цену через JavaScript. Proxy Finder с exitCountries (если ваш тариф включает таргетинг по странам) закрывает магазины, где цена зависит от страны посетителя, что схоже с проблемой, которую мы рассматривали для цен на продукты на уровне магазинов.
import datetime as dt
import requests

API = "https://eu.api.foura.ai/api/single/"
HEADERS = {"X-API-Key": "pk_live_..."}

def observe(product, parse_price):
    """One observation. A failed fetch is a gap, never a price."""
    r = requests.post(API, headers=HEADERS, json={
        "method": "GET",
        "url": product["url"],
        "validate": {
            "status": {"accept": [200]},
            "data": {"accept": [product["article_no"]]},
        },
    })
    body = r.json()
    row = {"day": dt.date.today(), "url": product["url"], "price": None,
           "request_id": r.headers.get("X-FourA-Request-Id")}
    if r.status_code == 200 and not body.get("error"):
        row["price"] = parse_price(body["data"])  # None when it isn't sure
        row["html"] = body["data"]                # the evidence
    return row

def prior_price(rows, sale_day, days=30):
    start = sale_day - dt.timedelta(days=days)
    priced = [x for x in rows
              if start <= x["day"] < sale_day and x["price"] is not None]
    if len({x["day"] for x in priced}) < days:
        return None  # a missing day can hide the lowest price
    return min(x["price"] for x in priced)

Строка с prior_price, возвращающая None, самая полезная во всем файле. Скидка, которую невозможно проверить, попадает в список "без вердикта" с перечислением недостающих дней. Лучше выдать отчет с таким списком, чем уверенно ошибиться.

Еще два решения нужно принять до распродажи, а не во время нее. Во-первых, собирать данные чаще раза в день для быстро меняющихся категорий; Oxylabs не просто так проверяли каждый час. Во-вторых, собирать историю глубже, чем на 30 дней. Правило смотрит ровно на этот срок назад, поэтому повышение цены прямо перед открытием окна и удержание ее до распродажи окажется незамеченным. Является ли это введением в заблуждение, решает Директива о недобросовестной коммерческой практике и юрист. А вот сможете ли вы доказать, что это произошло, зависит от данных, и ответить на это может только более длинная история.

Результаты

Показательный сценарий на основе описанной конфигурации: группа защиты прав потребителей проверяет 2000 товаров в 40 магазинах в трех странах дважды в день с 1 октября по Киберпонедельник.

  • 244 000 наблюдений, каждое сохранено с идентификатором request и исходным кодом страницы.
  • Ноль страниц с проверками challenge в колонке цен. Каждая строка либо прошла проверку товара, либо явно отмечена как пропуск.
  • Три вердикта вместо двух. Скидка признается нарушением, соответствующей правилам или "без вердикта", причем в третьем случае перечисляются пропущенные дни.
  • Доказательства прикреплены. К каждому отмеченному предложению прилагаются временные метки и страницы, подтверждающие минимум за 30 дней.
  • Повышения до начала окна на виду. История за восемь недель показывает цену, которая выросла прямо перед 28 октября и "упала" 27 ноября.
  • Бесплатные пропуски. Отклоненный запрос не тарифицируется, поэтому повторная попытка в тот же день оплачивается только при успешном вызове.

Главный вывод

Большинство пайплайнов скрапинга создаются так, чтобы выдавать верные результаты в среднем, а средние значения сглаживают погрешности. Правило 30 дней требует то единственное число, которое пайплайнам дается хуже всего: экстремум. Один выдуманный минимум или один упущенный спад, и вердикт меняется на противоположный.

Поэтому планка для системы проверки скидок формулируется не как "в основном правильно". Она звучит так: "никогда не выдумывать минимум, никогда его не упускать и честно сообщать, когда данных недостаточно". Окно для январских распродаж открывается еще до Рождества, а значит, таймер для следующего вердикта уже запущен.