프록시를 구매한다는 것은 아무도 설명해주지 않는 용어로 작성된 사양서를 읽는 일이며, 같은 단어가 두 벤더의 사이트에서 다른 의미를 가질 수 있다. 이것은 실무용 용어집으로, 실제로 지불 금액이나 얻는 결과를 바꾸는 용어들을 그것이 속한 결정 사항별로 묶어 평이한 언어로 정리한 것이다.
프록시 유형
레지덴셜 프록시. 일반 가정용 인터넷 연결에 속한 IP 주소로, 소비자용 ISP가 가정에 할당한다. 사이트는 이를 일반 방문자로 취급하기 때문에 서버를 차단하는 대상에서도 작동한다. 연결을 공유하기로 동의한 사람들에게서 확보되므로 공급량이 유한하며 가격에 이 점이 반영된다. 자세한 내용은 레지덴셜 프록시란 무엇인가를 참고하라.
데이터센터 프록시. 호스팅이나 클라우드 제공업체에 속한 주소다. 빠르고 저렴하며 물량이 풍부하지만, 주소 범위가 공개 등록되어 있기 때문에 서버라는 것이 즉시 드러난다. 방어되지 않은 대상에는 적합하지만 트래픽을 면밀히 검사하는 대상에는 취약하다. 비교 내용은 레지덴셜 대 데이터센터에 있다.
ISP 프록시, 고정 레지덴셜이라고도 불림. 소비자용 ISP에 등록된 호스팅 주소로, 레지덴셜급 신뢰도와 데이터센터급 안정성 및 속도를 갖추며 로테이션되지 않는다. 동일한 신원을 바꾸지 않고 유지해야 할 때 적합하다. ISP 대 레지덴셜을 참고하라.
모바일 프록시. 통신사의 모바일 네트워크에서 나오는 주소다. 통신사가 각 주소 뒤에 다수의 실제 가입자를 두기 때문에 차단하기 가장 어려운 유형이며, 그에 상응하게 가장 비싸고 가장 불안정하다. 모바일 대 레지덴셜을 참고하라.
프록시 풀. 제공업체가 라우팅할 수 있는 주소 집합이다. 대표 숫자는 비교 지표로서 약한데, 중요한 것은 실제로 사용하는 국가에서의 밀도와 동시에 사용 가능한 수이지 누적 개수가 아니기 때문이다.
트래픽 라우팅 방식
게이트웨이. 모든 트래픽을 보내는 단일 엔드포인트로, 제공한 파라미터를 기반으로 출구 주소를 대신 선택해준다. 이제 대체로 역사적 방식이 된 대안은 개별 프록시 주소와 포트 목록을 직접 관리하는 것이다.
로테이팅 프록시. 각 요청이 다른 주소를 통해 나간다. 대량 수집의 기본값으로, 물량을 분산시켜 어떤 단일 주소도 주목받지 않도록 한다. 로테이션 작동 방식을 참고하라.
스티키 세션. 선택한 세션 ID로 식별되는, 제한된 수명 동안 여러 요청에 걸쳐 유지되는 하나의 주소다. 사이트가 상태를 추적하는 다단계 흐름, 예를 들어 페이지가 넘어가는 검색이나 로그인 같은 경우에 필요하다. 스티키 대 로테이팅을 참고하라.
세션 ID와 TTL. 세션 ID는 요청을 동일한 출구 주소에 묶는 레이블이며, TTL은 그 매핑이 주소가 회전되기 전까지 유지되는 시간이다. 둘 다 보통 별도 설정이 아니라 프록시 사용자 이름 안에 표현된다.
동시성. 동시에 진행 중인 요청 수를 말한다. 요청을 시작하는 빈도인 속도와는 다른 개념이며, 일부 제공업체는 이를 별도로 계량한다. 무제한 동시 연결을 참고하라.
타겟팅
지역 타겟팅. 출구 주소가 위치할 국가를 선택하여 그곳의 방문자가 보는 것을 볼 수 있게 하는 것이다. 결과가 시장마다 달라지는 모든 수집 작업의 기본이다.
도시 단위 타겟팅. 특정 도시로 범위를 좁히는 것으로, 지역 검색, 매장 재고, 지역별 가격에 중요하며 그 외 대부분의 작업에서는 불필요하다. 도시 단위 타겟팅이 중요한 경우를 참고하라.
ASN 타겟팅. 주소가 속한 네트워크 사업자를 선택하는 것으로, 대상이 통신사별로 다르게 동작할 때 유용하다. ASN 타겟팅을 참고하라.
엄격 매칭. 필터와 정확히 일치하는 주소가 없을 때 더 넓은 영역으로 대체하는 대신 요청을 실패시키는 옵션이다. 잘못된 위치가 데이터를 조용히 손상시킬 수 있는 경우에 유용하다.
가격과 청구
GB당 가격 책정. 주소나 포트가 아니라 전송된 데이터에 대해 요금을 지불한다. 로테이팅 레지덴셜의 표준 모델이며, 예측해야 할 숫자를 IP 개수가 아니라 대역폭으로 만든다. 월간 대역폭 추정하기를 참고하라.
대역폭 할당량. 청구 주기 동안 요금제에 포함된 GB다. 일반적으로 이월되지 않는다.
초과 사용량, 때로 추가 트래픽이라고도 함. 할당량을 초과했을 때 발생하는 일로, 계정 설정에 따라 요청이 중단되거나 잔액에 GB당 요금이 계속 청구되며 사용이 이어진다.
포트당 또는 IP당 가격 책정. 고정된 수의 포트나 주소를 구매하던 구식 모델이다. 로테이팅 레지덴셜에서는 대체로 사라졌지만, 견적에서 이를 알아볼 수 있도록 이해해둘 가치는 있다. 포트당 시대가 끝난 이유를 참고하라.
품질과 신뢰
IP 평판. 사이트와 인텔리전스 서비스가 이전에 그 주소에서 이루어진 일을 근거로 축적한 판단이다. 진짜 레지덴셜 주소라도 평판이 나쁘면 깨끗한 주소보다 성능이 떨어지며, 이 때문에 평판은 유형만큼이나 중요하다. IP 평판이란 무엇인가를 참고하라.
핑거프린팅. 주소가 아니라 요청의 특성으로 클라이언트를 식별하는 것으로, TLS 핸드셰이크, HTTP/2 설정, 헤더 세트와 순서, 브라우저의 경우 렌더링 및 기기 세부 정보가 이에 해당한다. 깨끗한 IP라도 핑거프린트가 불일치하면 여전히 탐지된다. TLS 및 HTTP/2 핑거프린팅을 참고하라.
소프트 차단. 성공으로 위장된 거부로, 챌린지 페이지, 빈 결과, 잘린 목록, 또는 200 상태와 함께 반환되는 일반 페이지 등이 이에 해당한다. 순진한 모니터링이 이를 정상 작동으로 계산하기 때문에 가장 비용이 큰 실패 유형이다. 차단되거나 가짜인 콘텐츠 탐지하기를 참고하라.
검증된 성공률. 응답이 반환된 비율이 아니라 원하는 데이터가 반환된 요청의 비율이다. 보고할 가치가 있는 유일한 성공 지표다. 프록시 KPI를 참고하라.
윤리적 소싱. 풀을 구성하는 연결의 소유자들이 이를 알고 동의했는지, 그리고 옵트아웃할 수 있는지에 대한 문제다. 실질적인 결과를 낳는 공급망 문제로, 소싱이 공개되지 않은 경우 플래그가 지정되는 풀과 상관관계가 있다.
운영
속도 제한. 대상이 일정 기간 동안 수용하는 요청 수의 상한으로, 보통 IP당 적용된다. 페이싱은 이를 준수해야 하며, 풀은 제한을 없애는 것이 아니라 그 제한이 걸리는 지점을 바꿀 뿐이다. 속도 제한과 스로틀링을 참고하라.
백오프. 실패 후 재시도 사이의 대기 시간을 점진적으로 늘리는 것으로, 이상적으로는 무작위성을 더해 병렬 작업자들이 동기화된 물결로 재시도하지 않도록 한다. 재시도와 백오프를 참고하라.
페일오버. 경로 하나가 저하될 때 작업을 다른 경로로 옮겨 작업이 멈추지 않고 계속되도록 하는 것이다. 다중 지역 파이프라인의 페일오버를 참고하라.
407. 프록시가 자격 증명을 거부할 때 반환하는 상태 코드다. 대개 잘못된 자격 증명이나 형식이 잘못된 타겟팅 플래그가 원인이며, 재시도할 가치가 전혀 없다. 407 오류 해결하기를 참고하라.
가동 시간 SLA. 제공업체 자체의 가용성에 대한 약속이다. 대상 사이트가 트래픽을 수락하는지 여부에 대해서는 아무것도 말해주지 않으며, 이는 직접 모니터링해야 하는 별개의 축이다. SLA와 가동 시간 보장을 참고하라.
회의적으로 봐야 할 용어들
세 가지 문구는 보이는 것보다 적은 정보를 담고 있다.
“무제한.” 항상 어떤 차원에서 무제한인지 물어야 한다. 무제한 동시성은 의미가 있지만, 레지덴셜 상품에서의 무제한 대역폭은 보통 그렇지 않으며, 그런 표현이 등장하는 곳에는 대개 실제로 작동하는 다른 제한이 존재한다.
“99.9% 성공률.” 어떤 제공업체도 제3자 사이트가 트래픽을 수락할지를 통제할 수 없으므로, 임의 대상에 대한 성공률 주장은 누구도 지킬 수 있는 약속이 아니다. 대신 자신의 대상으로 직접 테스트하라. 속도, 성공률, 위치 정확도 테스트하기를 참고하라.
수천만 단위의 풀 크기. 검증할 수 없으며, 결과를 결정하는 요소도 아니다. 중요한 것은 수집하는 지점에서의 밀도이며, 이는 마케팅 페이지가 아니라 자신의 측정에서 드러난다. 풀이 주장하는 대로인지 확인하고 싶다면 레지덴셜로 판매되는 데이터센터 IP 찾아내기를 참고하라.
결론
용어의 대부분은 네 가지 결정으로 귀결된다: 어떤 유형의 주소가 필요한지, 어떻게 로테이션되어야 하는지, 어디에 위치해야 하는지, 그리고 어떻게 요금이 청구되는지. 나머지는 자신의 테스트가 어떤 사양서보다 더 잘 답해주는 품질 문제이거나, 구매 이후에 마주하게 될 운영 문제다. 어떤 용어가 측정 가능한 것을 설명하기보다 설득하는 역할을 하고 있다면, 그것을 마케팅으로 간주하고 직접 그 대상을 측정하라.
이를 실제 제품과 비교할 준비가 되었다면, 레지덴셜 프록시는 위에서 설명한 로테이팅, 스티키, 국가 및 도시 사례를 하나의 게이트웨이를 통해 다루며, GB당 가격 책정을 적용해 예측하는 숫자가 곧 지불하는 숫자가 되도록 한다. 요금제 수준의 결정 사항은 올바른 레지덴셜 프록시 요금제 선택하기에 있다.