Zyte

Introdução básica

Ao longo de 13 anos, a Zyte construiu todo um ecossistema em torno da raspagem da web: uma estrutura de raspagem de código aberto, navegador sem cabeça, serviços de coleta de dados e muito mais. O Smart Proxy Manager é uma – embora muito importante – peça de seu quebra-cabeça de coleta de dados.

A ferramenta nasceu como uma solução interna para um problema persistente. Como web scrapers, os caras da Zyte lidavam com proxies todos os dias. , eles pararam de se concentrar em quais IPs tinham e, em vez disso, colocaram todos os seus esforços em como eles funcionavam. O que surgiu foi a 'rede proxy mais inteligente do mundo'.

A Zyte afirma que isso permite que as empresas dimensionem suas operações com mais facilidade e transparência e está pronta para ajudá-las a atender bilhões de solicitações, se necessário.

Alguma desvantagem? Claro. Os planos mais baratos limitam tudo, desde solicitações simultâneas até suporte ao cliente (sem ajuda nos fins de semana!). A limitação e as novas tentativas automáticas podem preservar os proxies, mas também podem atrasá-lo. Não há SOCKS5. E, claro, os IPs não são realmente adequados para coisas fora da web scraping.

Nesta revisão, tentaremos descobrir se o Zyte pode competir com as redes de proxy residenciais dominantes. Vou examinar mais de perto os recursos, o desempenho, a experiência do usuário e o suporte ao cliente do Smart Proxy Manager. limitado, os principais recursos do provedor com prós e contras estão logo abaixo.

PRÓS

• Grande desempenho de raspagem
• Solicitações com falha não custam nada
• Gerenciamento inteligente de IP
• Avaliação gratuita generosa

CONTRAS

• Planos mais baratos limitam recursos
• Restrições de desempenho sob carga
• Casos de uso limitados

CARACTERÍSTICAS PRINCIPAIS

• Tipos de proxy: Datacenter, residencial
• Protocolos: HTTP, HTTPS
• Locais: mais de 12 países
• Segmentação: país
• Autenticação: chave de API
• Subusuários: Sim
• Painel: Sim
• Suporte: 24/5 (24/7 para empresas)
• Preço: a partir de US$ 99 para 100.000 solicitações

Opções de pagamento: Cartão de crédito, PayPal

Teste: 14 dias

Serviços Zyte

Proxies do Datacenter

Os proxies de datacenter são o principal produto da Zyte – ou, pelo menos, a base para isso. O que você realmente está comprando são os recursos de gerenciamento de proxy montados na parte superior, e o provedor constantemente o lembrará de 'focar nos dados, não nos proxies'.

Portanto, não podemos saber ao certo quantos IPs existem. Também não há muitas informações sobre a cobertura do local: o pessoal da Zyte nos disse que existem 12 países com mais de 1 mil IPs e pode obter outros locais sob demanda .Isso provavelmente porque a Zyte aluga proxies de outros provedores, para que possa atender às suas necessidades.

Resumindo, o que vemos não é espetacular.A parte interessante é o que não vemos – a lógica de gerenciamento de proxy do Zyte.Aqui estão alguns de seus recursos subjacentes:

Limitação de solicitações – O Smart Proxy Manager examina o site que você está copiando, estima sua carga, histórico de banimentos e limita a taxa de solicitações apenas o suficiente para que você não seja banido. Novas tentativas automáticas – O Smart Proxy Manager mantém um banco de dados de diferentes tipos de banimentos, captchas e códigos de resposta. Assim que detecta um bloqueio, o sistema alterna automaticamente o IP e repete a solicitação. Cookies e sessões – os proxies podem ser configurados para armazenar cookies, para que você não precise fazer isso em seu rastreador. Esse recurso não está disponível nos planos mais baratos, que simplesmente descartam os cookies.

Proxies Residenciais

A Zyte não trata os proxies residenciais como um produto autônomo. Em vez disso, é um complemento pago para clientes que precisam lidar com os sites mais indisciplinados. Embora tivéssemos acesso a um plano Enterprise personalizado, ele não incluía o proxy residencial funcionalidade. Presumo que segue a mesma lógica de gerenciamento de proxy dos IPs do datacenter.

Preços

Posicionando-se como um provedor de dados que também vende proxies, a Zyte tem um modelo de preços correspondente. Ele cobra não por IPs (o padrão do datacenter) ou tráfego (99% dos provedores de proxy residenciais), mas sim por solicitações bem-sucedidas. Isso mesmo: você pague apenas pelos dados que receber.

Existem algumas armadilhas aqui e ali: por exemplo, um redirecionamento conta como uma solicitação bem-sucedida. Mas tudo isso são detalhes; em geral, o modelo de precificação é transparente e simples de entender. Eu só questionaria o bloqueio de recursos. Não tenho certeza se a Zyte decidiu que clientes menores não precisam de coisas como mais conexões simultâneas e lista de permissões de IP, ou se é simplesmente uma tentativa de vender mais.

Aqui estão os planos da Zyte:

O plano inicial mais barato começa em $ 29 por mês. Isso lhe dará 50 mil solicitações, com a capacidade de recarregar por uma taxa extra. O plano a seguir, Básico, oferece 200 mil solicitações por US$ 99. O plano Avançado mais popular custa US$ 349 para 2,5 milhões de solicitações. Portanto, é quase três vezes mais eficiente . O plano Enterprise começa em $ 999 e é adaptado de acordo com suas necessidades.

Testes de performance

Executamos o Smart Proxy Manager em vários testes de desempenho para ver se seus proxies eram estáveis, rápidos e podiam acessar alguns dos principais sites.

Teste de qualidade de proxy

Como esperado, os IPs vieram de um data center. Todos usaram o protocolo IPv4, que ainda é considerado superior ao IPv6. Fizemos muitos pedidos, mas conseguimos identificar apenas 51 proxies. Não sabemos se é porque esses foram os únicos IPs que recebemos ou se a lógica de gerenciamento de proxy do Zyte decidiu que não havia necessidade de atribuir mais para um site que não os bloquearia.

Ao longo dos dias de testes, o SmartProxy Manager provou ser muito estável e 99,91% das solicitações que fizemos foram bem-sucedidas. Este é um ótimo resultado.

Teste de taxa de sucesso

Os proxies se saíram especialmente bem com sites de comércio eletrônico: Amazon, eBay e Craigslist tiveram uma taxa de sucesso de 100%. Os mecanismos de pesquisa se mostraram mais difíceis de quebrar, especialmente o Google (86,72%). , Instagram em particular. Isso é compreensível, considerando como o Instagram é abusado por IPs de datacenter.

Devido às medidas de gerenciamento de proxy do Zyte, tivemos poucos bloqueios definitivos. Sempre que os proxies falharam, foi principalmente devido a tempos limite (mais de 30s). Aumentar o limite de tempo limite provavelmente tornaria a taxa de sucesso ainda melhor em detrimento da velocidade.

Teste rápido