용어집

IP 풀이란 무엇인가요?

IP 풀은 프록시 제공업체가 고객 트래픽의 종료 IP로 할당할 수 있는 IP 주소의 집합으로, 일반적으로 여러 서브넷, ASN, 지역에 걸쳐 있습니다.

프록시 풀을 유용하게 만드는 요소(크기, 다양성, 신선도, 지역 커버리지)가 무엇인지, 왜 특정 임계치를 넘으면 풀의 품질이 크기보다 중요한지, 그리고 이를 평가하는 방법을 이해합니다.

설명

IP 풀은 프록시 게이트웨이가 고객 트래픽을 라우팅할 수 있는 기본 IP 주소 목록입니다. 로테이팅 프록시에 연결하고 게이트웨이가 종료 IP를 선택할 때, 이 풀에서 선택합니다. 풀 품질은 스크래핑 또는 검증 작업의 성공 여부를 결정하는 단 하나의 가장 큰 변수입니다.

IP 풀을 평가할 때 중요한 세 가지 차원이 있습니다: 규모(사용 가능한 IP의 총 개수), 다양성(포함된 고유 서브넷과 ASN의 수), 지역 범위(대상 국가/도시/ISP의 수)입니다. 1000개의 서브넷에 분산된 10M개의 IP를 가진 풀은 일반적으로 50개의 서브넷에 집중된 100M개의 IP를 가진 풀보다 더 효과적입니다. 안티봇 시스템은 개별 IP뿐만 아니라 서브넷과 ASN 수준에서도 IP를 추적하기 때문입니다.

신선도 또한 중요합니다. 옵트인 SDK 파트너십을 통해 성장하는 레지덴셜 풀은 사용자가 네트워크에 가입하고 탈퇴함에 따라 IP를 지속적으로 순환시킵니다. 몇 달 동안 정체된 풀은 매주 갱신되는 풀보다 일반적인 대상에서 이미 플래그가 지정된 IP가 더 많을 것입니다.

작동 방식

레지덴셜 프록시 제공업체는 사용자가 무료 또는 프리미엄 기능을 대가로 참여를 선택하는 애플리케이션 및 SDK와 제휴하여 풀을 유지합니다. 사용자가 온라인 상태이고 SDK가 활성화되어 있으면, 해당 사용자의 기기는 그 시간 동안 자신의 IP를 프록시 풀에 제공합니다. 제공업체의 게이트웨이는 해당 기기를 사용 가능한 종료 엔드포인트로 취급하여 소량의 고객 트래픽을 그 기기를 통해 라우팅하고, 사용자가 오프라인 상태가 되면 풀에서 제거합니다.

대형 제공업체는 언제든지 수백만 개의 기기를 활성 풀에 유지하며, 새로운 기기가 지속적으로 들어오고 나갑니다. 게이트웨이는 지역 필터, IP 상태, 부하 분산을 기반으로 종료 IP를 선택하여, 고객에게 모든 내부적인 변동을 추상화한 단일 엔드포인트를 제공합니다.

타입

레지덴셜 IP 풀

ISP가 실제 소비자 기기에 할당한 IP 풀입니다. 보호된 사이트에서 신뢰도 점수가 가장 높으며, 대부분의 현대적인 스크레이핑 및 검증 작업에 사용되는 IP 유형입니다.

ISP / 고정 레지덴셜 IP 풀

소비자 ISP에 등록되었지만 데이터센터 인프라에서 호스팅되는 IP 풀입니다. 레지덴셜 프록시보다 규모가 작고 안정적이며 스티키 워크플로에 사용됩니다.

모바일 IP 풀

4G/5G를 통해 이동통신사가 할당한 IP 풀입니다. 원시 개수는 가장 적지만 CGNAT로 인해 신뢰도가 가장 높아 가장 민감한 작업에 사용됩니다.

데이터센터 IP 풀

클라우드 및 호스팅 제공업체의 IP 풀입니다. 저렴하고 빠르지만 보호된 대상에서 안티봇 시스템에 쉽게 탐지됩니다.

일반적인 사용 사례

다양한 서브넷에 걸친 로테이팅 프록시 처리량 확장
국가별 심층 커버리지를 갖춘 Geo 타겟팅 스크래핑
대규모 신선한 풀에서 가져와 상습 위반자 차단 회피
계정당 하나의 IP를 사용하는 다중 계정 워크플로우
니치 시장을 위한 롱테일 도시 / ASN 커버리지
자주 묻는 질문

자주 묻는 질문

다음에 대한 일반적인 질문 ip 풀.

Shifter는 195+개국에 걸쳐 205M개 이상의 레지덴셜 IP 풀을 유지하며, 주요 시장에서는 도시 단위의 세분화된 타겟팅이 가능합니다. 이 풀은 기기가 네트워크에 연결되고 해제됨에 따라 지속적으로 갱신됩니다.

일정 임계값까지는 그렇습니다. 그 임계값을 넘어서면 단순한 개수보다 다양성이 더 중요해집니다. 1000개의 서브넷과 200개의 ASN에 분산된 1000만 개 IP 풀은 50개 서브넷에 집중된 1억 개 IP 풀보다 안티봇 시스템 회피에 더 효과적인데, 대부분의 탐지 시스템이 서브넷/ASN 수준에서 IP를 추적하기 때문입니다.

레지덴셜 제공업체는 앱과의 옵트인 SDK 파트너십을 통해 풀을 확장하며, 사용자는 프리미엄 앱 기능을 대가로 유휴 대역폭과 IP 용량을 공유하는 데 명시적으로 동의합니다. ISP 및 모바일 풀은 ISP 및 통신사와의 상업적 파트너십을 통해 확장됩니다.

건강한 레지덴셜 풀에서는 사용자가 온라인 상태가 되거나 네트워크를 변경함에 따라 평균 IP가 순환합니다. 요청 단위로 보이는 '신선도'는 ISP가 각 IP를 현재 디바이스에 얼마나 최근에 할당했는지에 따라 달라집니다. 주요 제공업체는 높은 순환율을 보이며, 이는 풀을 신선하게 유지합니다.

대부분의 로테이팅 프록시 제공업체는 기반이 되는 디바이스 풀이 끊임없이 변동하기 때문에 전체 풀 목록을 공개하지 않습니다. 응답을 확인하거나 IP-echo 엔드포인트를 사용하여 요청별 종료 IP를 검증할 수 있습니다.

새로운 IP로 로테이션하세요. 기본 풀의 크기와 다양성이 다음 시도에서 깨끗한 IP를 얻는 빈도를 결정합니다. 더 크고 다양한 풀일수록 작동하는 IP를 찾기 위한 로테이션 횟수가 줄어듭니다. Shifter의 풀은 이것이 거의 의미 있는 제약이 되지 않을 정도의 규모입니다.