자이테

기본 소개

13년 동안 Zyte는 오픈 소스 스크래핑 프레임워크, 헤드리스 브라우저, 데이터 수집 서비스 등 웹 스크래핑을 중심으로 전체 생태계를 구축했습니다. Smart Proxy Manager는 매우 중요하지만 데이터 수집 퍼즐의 한 조각을 만듭니다.

이 도구는 잔소리하는 문제에 대한 사내 솔루션으로 탄생했습니다. 웹 스크레이퍼로서 Zyte의 사람들은 매일 프록시를 처리했습니다. , 그들은 그들이 가진 IP에 집중하는 것을 멈추고 대신 그들이 일하는 방식에 모든 노력을 기울였습니다. 등장한 것은 '세계에서 가장 스마트한 프록시 네트워크'였습니다.

Zyte는 이를 통해 기업이 운영을 보다 쉽고 투명하게 확장할 수 있으며 필요한 경우 수십억 건의 요청에 도달할 수 있도록 지원할 준비가 되어 있다고 주장합니다.

단점이 있습니까?물론이죠.저렴한 계획은 동시 요청에서 고객 지원까지 모든 것을 제한합니다(주말에는 도움이 되지 않습니다!).조절 및 자동 재시도는 프록시를 보존할 수 있지만 속도를 저하시킬 수도 있습니다.SOCKS5는 없습니다. 물론 IP는 웹 스크래핑 이외의 작업에는 적합하지 않습니다.

이 리뷰에서는 Zyte가 지배적인 주거용 프록시 네트워크와 경쟁할 수 있는지 알아보겠습니다.Smart Proxy Manager의 기능, 성능, 사용자 경험 및 고객 지원에 대해 자세히 살펴보겠습니다.시간이 되시면- 장단점이 있는 공급자의 주요 기능은 바로 아래에 있습니다.

장점

• 뛰어난 스크래핑 성능
• 실패한 요청에는 비용이 들지 않습니다.
• 지능형 IP 관리
• 관대 한 무료 평가판

단점

• 저렴한 계획 제한 기능
• 부하 시 성능 제한
• 제한된 사용 사례

주요 특징들

• 프록시 유형: 데이터 센터, 주거용
• 프로토콜: HTTP, HTTPS
• 위치: 12개 이상의 국가
• 타겟팅: 국가
• 인증: API 키
• 하위 사용자: 예
• 대시보드: 예
• 지원: 24/5(기업의 경우 24/7)
• 가격: 10만 요청당 $99부터

결제 옵션: 신용카드, 페이팔

평가판: 14일

자이트 서비스

데이터 센터 프록시

데이터 센터 프록시는 Zyte의 주요 제품이거나 적어도 그 기반입니다. 실제로 구매하는 것은 상단에 장착된 프록시 관리 기능이며 공급자는 지속적으로 '프록시가 아닌 데이터에 집중'하도록 상기시켜줍니다.

따라서 우리는 얼마나 많은 IP가 있는지 확실히 알 수 없습니다. 위치 범위에 대한 정보도 많지 않습니다. Zyte 직원은 1,000개 이상의 IP가 있는 12개국이 있으며 필요에 따라 다른 위치를 얻을 수 있다고 말했습니다. .Zyte가 다른 제공업체로부터 프록시를 임대하기 때문에 귀하의 요구에 부응할 수 있습니다.

요컨대, 우리가 보는 것은 별로 특별하지 않습니다. 흥미로운 부분은 우리가 보지 못하는 Zyte의 프록시 관리 논리입니다. 다음은 몇 가지 기본 기능입니다.

요청 제한 – Smart Proxy Manager는 스크랩하고 있는 웹사이트를 살펴보고 로드, 차단 기록을 추정한 다음 차단되지 않도록 요청 속도를 제한합니다. 자동 재시도 - Smart Proxy Manager는 다양한 차단 유형, 보안 문자 및 응답 코드의 데이터베이스를 유지합니다. 차단을 감지하면 시스템이 자동으로 IP를 전환하고 요청을 재시도합니다. 쿠키 및 세션 – 쿠키를 저장하도록 프록시를 구성할 수 있습니다. 따라서 크롤러에서 그렇게 할 필요가 없습니다. 이 기능은 단순히 쿠키를 버리는 더 저렴한 요금제에서는 사용할 수 없습니다.

주거용 프록시

Zyte는 주거용 프록시를 독립 실행형 제품으로 취급하지 않습니다.대신 가장 다루기 힘든 웹 사이트를 처리해야 하는 클라이언트를 위한 유료 추가 기능입니다.맞춤형 Enterprise 계획에 액세스할 수 있었지만 주거용 프록시는 포함되지 않았습니다. 기능. 데이터 센터 IP와 동일한 프록시 관리 논리를 따른다고 가정합니다.

가격

프록시를 판매하는 데이터 제공업체로 자리매김한 Zyte는 그에 상응하는 가격 책정 모델을 가지고 있습니다. IP(데이터 센터 표준) 또는 트래픽(가정용 프록시 제공업체의 99%)이 아닌 성공적인 요청에 따라 비용을 청구합니다.맞습니다. 받은 데이터에 대해서만 비용을 지불하세요.

여기저기서 몇 가지 문제가 있습니다. 예를 들어 리디렉션은 성공적인 요청으로 간주됩니다. 그러나 이것들은 모두 세부 사항입니다. 일반적으로 가격 책정 모델은 투명하고 이해하기 쉽습니다. 기능 잠금에 대해서만 질문하겠습니다. Zyte가 소규모 고객이 더 많은 동시 연결 및 IP 화이트리스트와 같은 것을 필요로 하지 않는다고 결정했는지 아니면 단순히 상향 판매를 시도했는지는 확실하지 않습니다.

Zyte의 계획은 다음과 같습니다.

가장 저렴한 스타터 플랜은 월 $29부터 시작합니다. 이렇게 하면 추가 요금으로 충전할 수 있는 기능과 함께 50,000개의 요청이 제공됩니다. 다음 계획인 Basic은 $99에 200,000개의 요청을 제공합니다. 가장 인기 있는 Advanced 계획은 250만 요청에 대해 $349입니다.따라서 거의 3배 더 효율적입니다. . 엔터프라이즈 요금제는 $999부터 시작하며 필요에 따라 조정됩니다.

성능 테스트

여러 성능 테스트를 통해 Smart Proxy Manager를 실행하여 프록시가 안정적이고 빠르며 일부 주요 웹 사이트에 액세스할 수 있는지 확인했습니다.

프록시 품질 테스트

예상대로 IP는 데이터 센터에서 나왔습니다.모두 IPv6보다 우수하다고 여겨지는 IPv4 프로토콜을 사용했습니다.우리는 많은 요청을 했지만 51개의 프록시만 식별할 수 있었습니다. 이것이 우리가 받은 유일한 IP였기 때문인지 아니면 Zyte의 프록시 관리 논리가 이를 차단하지 않는 웹사이트에 더 할당할 필요가 없다고 결정했는지 알 수 없습니다.

테스트 기간 동안 SmartProxy Manager는 매우 안정적인 것으로 입증되었으며 99.91%의 요청이 성공했습니다. 이것은 훌륭한 결과입니다.

성공률 테스트

프록시는 전자 상거래 웹사이트에서 특히 잘 작동했습니다. Amazon, eBay 및 Craigslist는 모두 100%의 성공률을 보였습니다. 검색 엔진, 특히 Google(86.72%)은 크래킹하기 더 어려웠습니다. Smart Proxy Manager의 가장 어려운 과제는 소셜 미디어 플랫폼이었습니다. , 특히 Instagram.Instagram이 데이터 센터 IP에 의해 얼마나 남용되는지 고려하면 이해할 수 있습니다.

Zyte의 프록시 관리 조치로 인해 완전한 차단이 거의 발생하지 않았습니다. 프록시가 실패할 때마다 대부분 시간 초과(30초 이상) 때문이었습니다. 시간 초과 임계값을 늘리면 속도를 희생하여 성공률을 훨씬 더 높일 수 있었습니다.

속도 테스트