2026년 3월, EU 23개국과 아이슬란드 및 노르웨이의 소비자 당국은 블랙 프라이데이 및 사이버 먼데이 세일에 대한 조사 결과를 발표했습니다. 점검 대상 314개 온라인 쇼핑몰 중 30%가 할인 기준 가격을 잘못 표시하고 있었습니다. 해당 쇼핑몰들이 위반한 규정은 단 한 문장으로 요약됩니다. 하지만 이를 검증하려면 세일 시작 한 달 전부터 수집한 데이터가 필요합니다.
도전 과제
EU 가격표시 지침(Price Indication Directive)에 따르면, 가격 인하를 공지하는 쇼핑몰은 이전 30일 동안 적용한 최저가를 기준 가격으로 명시해야 합니다. 2019년 옴니버스 지침(Omnibus Directive)을 통해 이 규칙이 추가되었으며, 쇼핑몰은 2022년부터 이를 준수해야 했습니다. 올해 블랙 프라이데이는 11월 27일이므로, 블랙 프라이데이의 '이전 가격'이 정직한지 판별하는 기준 기간은 10월 28일에 시작되었습니다. 할인 배너가 걸린 시점에 시작하는 트래커는 이미 한 달 늦은 셈입니다.
EU 집행위원회가 Apify를 활용해 자체 구축한 모니터링 시스템은 2022년 블랙 프라이데이 일제 조사에서 176개 쇼핑몰의 제품 16,000개를 모니터링했으며, 2025년 10월까지 1,556개 유통사의 제품 136,931개를 검증하는 데 기여했습니다. 세일 기간과 그 이전 30일 동안의 가격을 수집했고, 각 페이지의 스크린샷을 증거로 보관했습니다. Oxylabs는 2024년 미국에서 유사한 조사를 진행했습니다. 8월 13일부터 매시간 61,172개 제품을 추적했으나, 분석 방식에서 요구한 90일 동안 등록 상태를 유지하며 블랙 프라이데이에 실제로 할인 판매된 제품은 4,529개에 불과했습니다. 제품 목록의 변경 주기는 대부분의 예상보다 훨씬 빠릅니다.
하지만 까다로운 부분은 규모가 아니라 통계적 특성에 있습니다.
기준 가격은 최솟값(minimum)이며, 최솟값은 단 한 번의 관측값으로 결정됩니다. 평균값은 하루 정도의 이상치 데이터를 무시할 수 있지만, 최솟값은 바로 그 하루에 의해 결정됩니다. 스크래퍼에 오류가 발생하는 두 가지 경우 모두 판정 결과를 완전히 뒤집는 이유가 여기에 있습니다.
- 수집 누락은 최저가를 숨깁니다. 가격이 내려간 바로 그 날 페이지가 챌린지 페이지, 동의 화면 또는 타임아웃을 반환합니다. 수집된 최솟값은 실제보다 높게 측정되어 가짜 할인이 정상적인 할인으로 통과됩니다.
- 잘못 읽은 가격은 최저가를 왜곡합니다. 파서가 '~부터' 시작하는 가격, 회원 전용가, 다른 옵션 또는 캐러셀의 액세서리 가격을 추출합니다. 수집된 최솟값은 실제보다 낮게 측정되어 정상적인 할인이 가짜 할인으로 오탐됩니다.
가격 하락은 일시적일 수 있습니다. Which?의 2025년 블랙 프라이데이 조사에 따르면, 영국 8개 소매업체의 175개 제품을 1년간 추적한 결과 83%가 4주간의 세일 기간 외에 최소 한 번 이상 동일하거나 더 저렴한 가격에 판매되었습니다. 추적 대상이었던 한 TV는 블랙 프라이데이 바로 다음 날 £1,039에서 £999로 잠시 하락하기도 했습니다. (영국에는 자체 규정이 있지만, 스크래퍼의 관점에서는 하루 동안의 가격 하락도 동일하게 보입니다.)
특가 정보 사이트에게 첫 번째 오류는 신뢰도 하락을 의미합니다. 규제 기관, 소비자 단체, 언론사에게 두 번째 오류는 소매업체가 저지르지 않은 행위를 부당하게 고발하는 결과를 낳습니다.
접근 방식: 공백은 공백으로 둔다
수집 단계에서는 실패한 fetch를 절대 숫자로 변환하지 않아야 하며, 계산 단계에서는 결측치가 존재하는 기간에 대해 판단을 유보해야 합니다. fetch 실패가 어떻게 잘못된 신호로 둔갑하는지는 대체 데이터: 차단이 데이터 포인트로 오인될 때에서 다룬 바 있습니다. 30일 최저가 기준은 이러한 문제가 가장 엄격하게 드러나는 사례입니다.
FourA와 같은 플랫폼을 사용하면 고려할 구성 요소는 단순합니다:
- 페이지를 읽기 전에 검증합니다.
validate는 제품의 고유 품번과 같이 올바른 제품 페이지만이 포함하는 문자열을 확인합니다. 챌린지 페이지, "제품을 찾을 수 없음" 페이지, 동의 화면은 호출 실패로 처리되며, 성공 기준을 사용자의 규칙으로 직접 정의하므로 비용이 청구되지 않습니다. 데이터 행에는 가격 대신 공백이 기록됩니다. - 증거를 보관합니다. response에는
X-FourA-Request-Id가 포함됩니다. 이를 가격, 타임스탬프, 원본 HTML과 함께 저장하십시오. 시스템의 활동 로그는 request 미리보기를 24시간만 보관하므로 증거 아카이브는 자체 스토리지에 유지해야 합니다. - 쇼핑몰에 맞는 endpoint를 선택합니다. Single은 서버 렌더링 방식의 제품 페이지를 처리합니다. Browser는 JavaScript로 가격을 생성하는 쇼핑몰에 적합합니다.
exitCountries가 포함된 Proxy Finder(플랜에 국가 타겟팅이 포함된 경우)는 방문자의 국가에 따라 가격이 달라지는 쇼핑몰을 처리하며, 이는 매장별 식료품 가격에서 다루었던 문제와 유사합니다.
import datetime as dt
import requests
API = "https://eu.api.foura.ai/api/single/"
HEADERS = {"X-API-Key": "pk_live_..."}
def observe(product, parse_price):
"""One observation. A failed fetch is a gap, never a price."""
r = requests.post(API, headers=HEADERS, json={
"method": "GET",
"url": product["url"],
"validate": {
"status": {"accept": [200]},
"data": {"accept": [product["article_no"]]},
},
})
body = r.json()
row = {"day": dt.date.today(), "url": product["url"], "price": None,
"request_id": r.headers.get("X-FourA-Request-Id")}
if r.status_code == 200 and not body.get("error"):
row["price"] = parse_price(body["data"]) # None when it isn't sure
row["html"] = body["data"] # the evidence
return row
def prior_price(rows, sale_day, days=30):
start = sale_day - dt.timedelta(days=days)
priced = [x for x in rows
if start <= x["day"] < sale_day and x["price"] is not None]
if len({x["day"] for x in priced}) < days:
return None # a missing day can hide the lowest price
return min(x["price"] for x in priced)
prior_price이 None를 반환하는 부분이 파일에서 가장 유용한 라인입니다. 검증할 수 없는 할인은 누락된 일자를 명시하여 "판정 불가" 목록으로 분류됩니다. 잘못된 결과를 확신하는 보고서보다는 이 목록이 포함된 보고서를 발행하는 편이 낫습니다.
세일 기간이 아니라 그전에 내려야 할 두 가지 결정이 더 있습니다. 첫째, 가격 변동이 빠른 카테고리는 하루에 한 번 이상 샘플링하십시오. Oxylabs가 매시간 확인한 데에는 이유가 있습니다. 둘째, 30일보다 더 이전의 데이터를 수집하십시오. 규정은 정확히 30일 전까지만 조회하므로, 기간이 시작되기 직전에 가격을 올리고 세일까지 유지하면 규정상 감지되지 않습니다. 이것이 오도 행위인지 여부는 불공정 상행위 지침과 변호사가 판단할 문제입니다. 실제로 그런 일이 일어났음을 입증할 수 있는지는 데이터의 문제이며, 더 긴 기간의 기록만이 이에 답할 수 있습니다.
결과
위 설정을 기반으로 한 예시 시나리오: 한 소비자 단체가 10월 1일부터 사이버 먼데이까지 3개국 40개 쇼핑몰의 2,000개 상품을 하루 두 번 점검합니다.
- 244,000건의 관측치, 각각의 request id와 원본 페이지를 함께 저장.
- 가격 열에 챌린지 페이지 전무. 모든 행은 상품 검증을 통과했거나 명시적인 공백으로 처리됨.
- 두 개가 아닌 세 개의 판정 결과. 할인은 위반, 준수, 또는 "판정 불가"로 분류되며, 세 번째 결과에는 누락된 일자가 나열됨.
- 증거 첨부. 플래그가 지정된 모든 딜에는 30일 최저가를 뒷받침하는 타임스탬프와 페이지가 첨부됨.
- 수집 기간 직전의 인상 포착. 8주간의 기록을 통해 10월 28일 직전에 가격이 올랐다가 11월 27일에 "할인"된 정황을 확인.
- 무료 공백 처리. 거부된 요청에는 요금이 청구되지 않으므로, 당일 재시도시 성공한 호출에 대해서만 비용이 발생.
핵심 요점
대부분의 스크래핑 파이프라인은 평균적으로 정확하도록 구축되며, 평균은 오차를 허용합니다. 그러나 30일 규정은 파이프라인이 가장 취약한 단 하나의 값인 극값을 요구합니다. 조작된 최저가가 하나라도 생기거나 실제 하락세를 한 번이라도 놓치면 판정이 뒤바뀝니다.
따라서 할인 검증 도구의 기준은 "대체로 정확함"이 아닙니다. "최저가를 임의로 만들어내지 않고, 누락하지 않으며, 판단할 수 없을 때는 이를 명시하는 것"입니다. 1월 세일을 위한 기간은 크리스마스 전에 시작되므로, 다음 판정을 위한 시계는 이미 돌아가고 있습니다.