“경쟁사 X는 장소마다 다른 가격을 책정한다”는 가격 분석에서 가장 흔히 나오는 발견 중 하나이면서, 동시에 가장 신뢰하기 어려운 발견 중 하나이기도 하다. 서로 일치하지 않는 두 관측치는 가격이 달라졌다는 것을 증명할 뿐이다. 왜 달라졌는지는 증명하지 못한다.
가격은 쇼핑객이 어디에 있는지, 언제 확인했는지, 혹은 누구로 인식되는지에 따라 달라질 수 있다. 이 세 가지는 서로 다른 메커니즘이며 각각 상업적, 법적 함의도 다르다. 이를 구분하지 않는 수집 설계는 세 가지 모두를 분석자가 예상했던 하나의 원인으로 귀속시키게 된다.
이 가이드는 검증을 견뎌낼 수 있는 방식으로 가격 변동을 탐지하는 방법을 다룬다. 즉, 차이가 원인을 가리키도록 비교를 설계하는 것이다.
스프레드시트에서는 동일해 보이는 세 가지 메커니즘
지리적 가격 책정. 가격이 쇼핑객의 시장, 지역 또는 도시에 따라 달라진다. 서로 다른 통화, 세금, 경쟁 조건 때문에 이는 흔한 일이며 대체로 특별할 것이 없다.
동적 가격 책정. 가격이 시간에 따라 달라진다: 수요, 재고, 경쟁사의 움직임, 하루 중 시각 등. 같은 장소의 두 쇼핑객이라도 서로 다른 시점에 보면 다른 가격을 보게 된다.
개인화 가격 책정. 가격이 개별 쇼핑객의 속성에 따라 달라진다: 기기, 브라우징 이력, 계정 상태, 로열티 등급, 또는 지불 의사에 대한 모델의 추정치 등.
월요일 시장 A에서의 단일 관측치와 화요일 시장 B에서의 단일 관측치로는 이 중 어느 것도 구분할 수 없다. 두 관측치는 장소와 시간이 모두 다르며, 세션 상태까지 다를 수도 있다. 이 가이드의 모든 내용은 이 점을 고정하는 데서 출발한다.
원칙 하나: 한 번에 한 가지만 바꾼다
탐지는 하나의 실험이다. 각 비교마다 테스트하려는 조건 하나를 제외한 모든 조건을 고정해야 한다.
| 테스트 대상 | 변경할 것 | 고정할 것 |
|---|---|---|
| 지리적 가격 책정 | 시장 또는 도시 | 시간, 기기, 세션 상태 |
| 동적 가격 책정 | 시간 | 시장, 기기, 세션 상태 |
| 기기 기반 가격 책정 | 기기 프로필 | 시장, 시간, 세션 상태 |
| 세션 또는 이력 효과 | 세션 상태(신규 대 기존) | 시장, 시간, 기기 |
가장 중요한 고정 요소는 시간이다. 온라인상의 거의 모든 것이 지속적으로 가격이 재산정되기 때문이다. 지리적 요인을 테스트하려면 서로 다른 시장의 관측치를 동시에, 즉 한 시간 차이가 아니라 몇 초 이내의 간격으로 수집해야 한다. 그렇지 않으면 동적 가격 책정이 모든 지리적 발견을 오염시킨다.
원칙 둘: 먼저 자신의 노이즈를 측정한다
두 시장이 다르다고 주장하기 전에, 같은 시장이 자기 자신과 얼마나 다른지를 먼저 확인해야 한다.
**대조쌍(control pair)**을 실행하라: 같은 도시에서, 같은 순간에, 동일한 기기 프로필과 신규 세션으로 얻은 두 개의 관측치. 만약 대조쌍이 서로 일치하지 않는다면, A/B 테스트, 순환 프로모션, 캐시 효과, 혹은 무작위 가격 책정을 보고 있는 것이며, 이 노이즈보다 작은 시장 간 차이는 아무 의미가 없다.
대조쌍을 하루 동안, 그리고 여러 제품에 걸쳐 반복하라. 시장 내 차이의 분포가 바로 노이즈 기준선이며, 다른 모든 비교는 이 기준에 비추어 판단된다.
원칙 셋: 결론 내리기 전에 반복한다
동시에 수행한 하나의 비교라도 여전히 하나의 관측치에 불과하다. 실제 지리적 또는 개인화 가격 책정은 지속적이다. 즉, 동일한 조건이 관측을 거듭해도 같은 방향의 차이를 만들어낸다.
실행 가능한 기준은 각 비교를 여러 날, 여러 시간대에 걸쳐 반복하고, 그 차이가 노이즈 기준선보다 크고, 방향이 일관되며, 반복 관측에서도 나타날 때에만 실재하는 것으로 취급하는 것이다. 한 번 나타났다가 다시는 나타나지 않는 차이는 노이즈이거나 소매업체 측의 실험일 뿐, 가격 정책이 아니다.
개인화로 위장하는 교란 요인 제거하기
겉으로 개인화 가격 차별처럼 보이는 것들 대부분은 이러한 요인을 통제하면 사라진다.
통화. 쇼핑객에게 표시되는 통화로 비교한 다음, 날짜가 명시된 환율로 환산하라. 한 시장에서 환산한 값을 다른 시장에서 표시된 값과 비교해서는 절대 안 된다.
세금 표시. 일부 시장은 세금 포함 가격을, 일부는 세금 미포함 가격을 표시한다. VAT 세율과 일치하는 20%의 차이는 가격 결정이 아니다.
배송비 및 수수료. 배송비가 붙는 낮은 상품 가격은 더 낮은 가격이 아니다. 가능하다면 전체 장바구니 비용을 포착하라.
재고 및 변형 차이. 같은 제품명이라도 다른 시장에서는 다른 변형, 포장 단위, 모델일 수 있다. 제목이 아니라 식별자로 매칭하라.
매장 또는 이행(fulfilment) 배정. 지역 재고를 보유한 소매업체는 매장별로 가격을 책정한다. 도시 단위의 차이는 실제로는 서로 다른 두 매장에 불과할 수 있으며, 이는 다른 경로를 통한 지리적 가격 책정이다.
캐시된 페이지. 캐시된 페이지는 더 이상 유효하지 않은 가격을 보여줄 수 있다. 응답 헤더를 기록하고, 비교 자체에는 캐시되지 않은 관측치를 우선하라.
수집 설계하기
수집 계층은 각 비교가 요구하는 조건을 정확히 충족시켜야 하며, 그 충족 여부를 증명할 수 있어야 한다.
시장별 실제 관측 지점. 한 국가의 데이터센터 대역에서 보낸 요청은 다른 국가의 쇼핑객이 보는 것을 보지 못한다. 국가 및 도시 타겟팅이 가능한 레지덴셜 프록시는 현지 관측 지점을 제공한다. Shifter 게이트웨이를 사용할 경우, 시장 정보는 p.shifter.io:443에 대한 자격 증명에 포함된다:
customer-USERNAME-country-fr-city-paris-sid-trial-0412-a:PASSWORD
customer-USERNAME-country-fr-city-paris-sid-trial-0412-b:PASSWORD
customer-USERNAME-country-de-city-berlin-sid-trial-0412-c:PASSWORD처음 두 줄은 대조쌍이다: 같은 도시, 별도의 세션으로 같은 순간에 발사된다. 세 번째는 시장 간 비교이다.
모든 출구를 검증하라. 요청을 신뢰하기보다 각 관측치의 실제 출구 위치를 기록하라. 잘못된 도시로 출구가 향한 비교는 비교가 아니며, 이는 지리적 발견이 잘못되는 가장 흔한 방식이다.
기본적으로 신규 세션을 사용하라. 각 시도마다 새로운 세션 식별자를 사용하여 각 관측치가 깨끗하게 시작되도록 하라. 이력 효과를 테스트할 때는 일련의 페이지뷰에 걸쳐 의도적으로 하나의 세션을 유지하라. 이 구분은 고정형 대 로테이팅 레지덴셜 프록시에서 다룬다.
일관된 로케일 신호. 언어, 시간대, 헤더는 출구가 주장하는 시장과 일치해야 한다. 그렇지 않으면 소매업체는 방문자를 일관성 없다고 인식하고 기본값을 제공할 수 있다. 프록시 지역, 시간대, 로케일 일치시키기를 참고하라.
동시 발사. 비교에 포함된 모든 관측치를 함께 트리거하고, 분석 시 충분히 가까웠는지 확인할 수 있도록 타임스탬프를 초 단위로 기록하라.
모든 관측치에 대해 기록해야 할 것
| 항목 | 중요한 이유 |
|---|---|
| 제품 식별자 | 동일한 항목을 비교하고 있음을 보장 |
| 표시 가격, 통화, 세금 기준 | 가장 흔한 세 가지 잘못된 발견을 방지 |
| 배송비 및 수수료 | 전체 장바구니 비교 |
| 요청 및 검증된 출구 위치 | 관측 지점을 증명 |
| 기기 프로필 | 기기 효과를 격리 |
| 세션 상태 | 신규 또는 기존, 그리고 지속 시간 |
| 초 단위 타임스탬프 | 동시성을 증명 |
| 응답 헤더 | 캐시된 페이지 탐지 |
| 원본 페이지 또는 스크린샷 | 이후 제기하는 주장의 증거 |
관측 맥락을 데이터셋의 일부로 취급해야 하는 근거는 관측 지점 표준에서, 그리고 균형 잡히지 않은 관측 지점 집합에서 결론을 도출하는 위험은 레지덴셜 프록시 풀은 표본이지, 인터넷 전체가 아니다에서 다루고 있다.
결론 내릴 수 있는 것과 없는 것
외부 관측은 특정하고 통제된 조건, 즉 시장, 기기 유형, 세션 상태 하에서 가격이 일관되게 달라진다는 것을 보여줄 수 있다. 이는 강력하고 유용한 발견이다.
그것으로는 그 이면의 알고리즘을 밝힐 수 없으며, 특정 개인을 위해 가격이 설정되었다는 것도 증명할 수 없다. 개인 수준의 개인화를 탐지하려면 실제로 서로 다른 수많은 고객으로서 사이트를 관찰해야 하는데, 이를 위해 계정이나 가상 인물을 만드는 것은 소매업체의 이용약관을 위반할 수 있다. 주장은 통제된 비교가 실제로 뒷받침하는 범위 내로 제한하라: “이 시장에서 모바일 가격은 일관되게 더 높다”라고는 말할 수 있어도, “이 소매업체는 가격을 개인화한다”라고는 말할 수 없다.
상업적으로나 법적으로 중요한 경우, 관할권마다 규칙이 다르다는 점을 기억하라. 예를 들어 EU에서는 사업자가 자동화된 의사결정에 기반하여 가격이 개인화되었을 때 소비자에게 이를 알려야 한다. 여러분의 발견은 그러한 판단에 참고 자료가 될 수는 있지만, 이는 증거일 뿐 법적 결론은 아니다.
탐지에서 모니터링으로
가격 패턴이 확립되면, 이를 재발견하기보다는 추적하는 것이 가치 있다. 동일한 시장에서 동일한 통제 하에 수집되는 연속적인 피드는 일회성 연구를 경쟁사의 정책 변경을 조기에 알려주는 경보 시스템으로 바꾸어 놓는다. 운영 측면은 실시간 경쟁사 가격 피드 구축하기에서, 이러한 효과가 가장 강하게 나타나는 여행 가격은 항공편 및 호텔 가격 스크래핑하기에서 다루고 있다.
FAQ
탐지 연구에는 몇 개의 시장을 포함해야 하는가?
상업적 질문이 필요로 하는 만큼, 동일한 방식으로 수집한 시장을 포함하면 된다. 대조쌍과 반복을 갖춘 5개 시장이 각각 한 번씩만 관측한 20개 시장보다 낫다.
동시 관측은 얼마나 가까운 시점이어야 하는가?
소매업체 자체의 재가격 책정이 그 사이에 끼어들 가능성이 낮을 만큼 가까워야 한다. 빠르게 변하는 카테고리라면 분 단위가 아니라 초 단위를 의미한다. 타임스탬프를 기록하고, 시간차가 벌어진 비교는 폐기하라.
브라우징 이력에 기반한 개인화를 탐지할 수 있는가?
부분적으로는 가능하다. 신규 세션과 미리 정의된 경로를 브라우징한 세션을 비교하는 방식이다. 통제된 세션이 보여줄 수 있는 범위 내로 한정하고, 사이트 이용약관을 준수하라.
왜 내 대조쌍이 서로 일치하지 않는가?
대개는 A/B 테스트, 무작위 프로모션, 또는 캐싱 때문이다. 그 불일치가 바로 여러분의 노이즈 기준선이며, 연구에서 가장 중요한 수치이다.
결론
가격 차이는 증상이지, 발견 그 자체가 아니다. 그것을 지리, 시간, 또는 개별 쇼핑객에 귀속시키려면 한 번에 한 조건만 바꾸고, 비교를 동시에 발사하고, 같은 도시의 대조쌍으로 자신의 노이즈를 측정하고, 결론을 내리기 전에 반복하고, 통화, 세금, 배송, 변형 효과를 제거해야 한다.
모든 관측 지점을 검증하고, 전체 관측 맥락을 기록하며, 주장을 통제 결과가 뒷받침하는 범위로 제한하라. 제품 개요는 가격 인텔리전스 모니터링 페이지에서, 요금은 가격 페이지에서 확인할 수 있다.