대부분의 인터넷 인프라는 예상대로 구축됩니다. 회사가 데이터센터에 공간을 임대하고, 서버를 설치하고, 거기서 서비스를 운영하는 식입니다. P2P(peer-to-peer) 레지덴셜 프록시 네트워크는 그런 방식으로 구축되지 않으며, 이 차이를 이해하면 처음에는 이상하게 보이는 부분을 포함해 이런 제품들이 어떻게 작동하는지 거의 모든 것을 설명할 수 있습니다.
기본 개념
P2P 네트워크에는 프록시 서버로 가득 찬 데이터센터가 없습니다. 이 네트워크는 평범한 사람들이 소유한 일반적인 기기, 즉 휴대폰, 노트북, 가정용 컴퓨터로 이루어지며, 이는 일반 가정용 인터넷 연결에 물려 있습니다. 참여하는 각 기기는 노드 역할을 할 수 있는데, 이는 네트워크를 대신해 요청을 전달하고 응답을 반환할 수 있다는 뜻입니다.
그래서 이런 종류의 프록시를 통해 요청을 보내면, 그 요청은 제공업체의 게이트웨이로 이동한 다음 참여자 한 명의 가정용 연결을 거쳐 여러분이 도달하려던 웹사이트로 향합니다. 웹사이트는 그 가정의 주소를 보게 되는데, 웹사이트 입장에서는 요청이 거기서 온 것이기 때문입니다.
굳이 이런 방식으로 네트워크를 구축하는 이유
서버를 임대하는 것보다 훨씬 복잡한 방식이니 그럴 만한 이유가 있어야 하는데, 이유는 정확히 하나입니다. 바로 주소입니다.
웹사이트는 트래픽이 어디서 오는지에 따라 다르게 취급합니다. 데이터센터 주소는 즉시 호스팅 인프라에 속한 것으로 식별되는데, 그 대역이 공개적으로 등록되어 있기 때문이며, 많은 사이트가 이를 차단이나 검증, 혹은 다른 콘텐츠 제공의 근거로 삼습니다. 가정용 연결은 사람처럼 보이는데, 실제로 사람이기 때문입니다.
이런 품질은 돈으로 살 수 없습니다. 소비자용 ISP는 가정에 주소를 할당하는 것이지, 그 주소로 자동화된 트래픽을 라우팅하려는 회사에 할당하는 것이 아닙니다. 실제 가정용 연결에서 요청을 보낼 수 있는 유일한 방법은 실제 가정이 그 요청을 대신 전달하는 것이며, 이것이 바로 P2P 네트워크가 마련하는 방식입니다. 주소 차이의 메커니즘은 레지덴셜 IP의 해부학에서 다룹니다.
사람들이 참여하는 이유
당연한 질문이 하나 있습니다. 왜 누군가가 낯선 사람의 트래픽이 자신의 인터넷 연결을 사용하도록 허락할까요?
그 대가로 무언가를 얻기 때문입니다. 보통의 방식은 애플리케이션이 선택지를 제공하는 것입니다. 사용하지 않는 대역폭의 일부를 공유하면, 그 대가로 유료 버전을 무료로 받거나, 광고 없는 경험을 얻거나, 소액의 대가를 받습니다. 사용자는 원했던 앱을 계속 사용하면서, 어차피 쓰지 않던 대역폭을 내주는 셈입니다.
이 방식이 정당한지는 전적으로 이것이 명확히 고지되고 진정으로 선택 가능한지에 달려 있으며, 이는 이 시장의 어떤 제공업체를 확인할 때든 가장 중요한 단 하나의 사항으로, 제공업체가 윤리적으로 IP를 확보하는 방법에서 자세히 다룹니다. 진정한 동의 없이 구축된 네트워크도 존재하며, 이는 윤리적 문제인 동시에 실질적으로도 더 나쁜 제품입니다.
얻는 것
접근성. 데이터센터 트래픽을 차단하는 사이트도 대체로 레지덴셜 주소는 받아들이는데, 이것이 바로 핵심입니다.
진짜 지리적 위치. 참여자들이 실제 장소에 있는 실제 가정이기 때문에, 특정 국가나 도시에서의 출구를 요청해 진정으로 현지의 관점을 얻을 수 있습니다. 이 덕분에 현지 가격, 현지 검색 결과, 지역별 이용 가능 여부를 확인할 수 있습니다.
다양성을 통한 규모. 참여자가 많은 대규모 네트워크는 그만큼 서로 다른 주소도 많다는 뜻이므로, 대규모 수집 작업을 한 곳에서 대상을 두드리는 대신 여러 주소에 분산시킬 수 있습니다.
감수해야 하는 것
여기서는 열정적인 것보다 정직한 것이 더 중요한데, 이 트레이드오프들은 실제이며 아키텍처에서 직접 비롯되기 때문입니다.
속도와 일관성. 데이터센터 서버는 빠르고 전용인 연결에 있습니다. 참여자의 기기는 다른 누군가도 사용하고 있는, 어쩌면 동영상을 스트리밍하고 있을 수도 있는 가정용 연결에 있습니다. 레지덴셜 요청은 평균적으로 더 느리고, 더 중요하게는 훨씬 더 변동성이 크므로, 평균이 아니라 백분위수로 생각해야 합니다.
변동하는 가용성. 사람들이 앱을 닫거나 집을 나서면 기기는 오프라인이 되므로, 어떤 나라든 저녁 시간대에 풀이 더 두터워지고 새벽 4시에는 얇아지며, 작은 나라일수록 이 현상을 더 크게 체감합니다. 그래서 국가별 가용성은 전 세계 공통의 수치가 아니라 여러분의 특정 시장과 시간대에 관한 문제입니다.
조기에 끝날 수 있는 세션. 여러 단계로 이루어진 작업 동안 하나의 주소를 유지하고 있는데 해당 기기가 오프라인이 되면, 작업 도중에 주소가 바뀝니다. 좋은 도구는 이를 처리해 주지만, 고정 프록시와 로테이팅 프록시에 따르면 여러분의 코드도 이런 상황을 예상해야 합니다.
비용. 참여자들에게 보상을 지급해야 하므로, 레지덴셜 대역폭은 데이터센터 트래픽보다 상당히 비쌉니다. 그래서 수상하게 저렴한 레지덴셜 상품은 의심을 받아야 하는데, 사슬 어딘가에서 누군가가 대가를 받지 못하고 있다는 뜻이기 때문입니다.
사용 방식에 대한 의미
초보자에게 실질적인 시사점은 두 가지입니다.
정중하게, 진심으로 그렇게 하세요. 여러분의 요청은 누군가의 가정용 연결을 거쳐 이동하므로, 공격적인 작업은 대상 사이트를 성가시게 하는 것뿐 아니라 실제 사람의 인터넷도 저하시킵니다. 속도 조절은 차단을 피하기 위한 것만이 아닙니다.
비용을 들일 가치가 있는 곳에서 사용하세요. 대상이 주소 유형을 신경 쓰지 않는다면 더 저렴한 인프라로도 충분하며, 그 비교는 레지덴셜 대 데이터센터에서 확인할 수 있습니다. 레지덴셜은 평범한 방문자처럼 보여야 하거나 특정 장소에서 보이는 것을 확인해야 할 때 비용을 지불할 가치가 있습니다.
여러분 쪽에서 보이는 모습
안심될 만큼 평범합니다. 개별 참여자에게 직접 연결하거나 기기 목록을 관리하지 않습니다. 하나의 게이트웨이에 연결하면, 그것이 여러분의 요청을 적절한 노드로 라우팅하는데, 이것이 백커넥트 아키텍처입니다. 설정은 연결 방법에 따라 호스트, 포트, 사용자 이름, 비밀번호로 이루어집니다.
결론
P2P 레지덴셜 프록시 네트워크는 서버가 아니라 평범한 사람들의 기기로 구축되는데, 이는 실제 가정용 연결에서 요청을 보낼 수 있는 유일한 방법이 실제 가정이 그 요청을 대신 전달하는 것이기 때문입니다. 이를 통해 웹사이트가 평범한 방문자로 취급하는 주소, 진정한 지리적 관점, 그리고 폭넓게 분산된 출구를 얻을 수 있습니다. 그 대가로 속도, 일관성, 시간대에 따라 달라지는 가용성, 조기에 끝날 수 있는 세션, 그리고 더 높은 가격을 감수해야 하는데, 이 모두는 결함이 아니라 동일한 아키텍처에서 비롯된 결과입니다. 참여자들이 진정으로 동의했는지 확인하고, 실제 사람의 연결이 여러분의 트래픽을 나르고 있으니 정중하게 행동하며, 실제로 비용을 들일 가치가 있는 곳에서 사용하세요.
이것이 국가 및 도시 타겟팅과 함께 하나의 게이트웨이를 통해 접속하고 GB 단위로 청구되는 레지덴셜 프록시의 모델입니다. 아직 방향을 잡는 중이라면 초보자를 위한 레지덴셜 프록시부터 시작하세요.