Zia

Introduzione di base

In 13 anni, Zyte ha costruito un intero ecosistema attorno al web scraping: un framework di scraping open source, browser headless, servizi di raccolta dati e altro ancora. Smart Proxy Manager costituisce un pezzo, anche se molto importante, del suo puzzle di raccolta dati.

Lo strumento è nato come soluzione interna a un problema fastidioso. In qualità di web scraper, i ragazzi di Zyte hanno a che fare con i proxy ogni giorno. Tuttavia, indipendentemente dal provider scelto, si sarebbero presto imbattuti in problemi con blocchi e affidabilità. Alla fine , hanno smesso di concentrarsi su quali IP avevano e hanno invece concentrato tutti i loro sforzi sul modo in cui funzionavano. Ciò che è emerso è stata la "rete proxy più intelligente del mondo".

Zyte afferma che ciò consente alle aziende di ridimensionare le proprie operazioni in modo più semplice e trasparente ed è pronto ad aiutarle a raggiungere miliardi di richieste, se necessario.

Eventuali svantaggi?Certo.I piani più economici limitano tutto, dalle richieste simultanee all'assistenza clienti (nessun aiuto nei fine settimana!).Il throttling e i tentativi automatici possono preservare i proxy, ma potrebbero anche rallentarti.Non ci sono SOCKS5. E, naturalmente, gli IP non sono davvero adatti per cose al di fuori del web scraping.

In questa recensione, proveremo a scoprire se Zyte può competere con le reti proxy residenziali dominanti. Darò un'occhiata più da vicino alle funzionalità, alle prestazioni, all'esperienza utente e all'assistenza clienti di Smart Proxy Manager. vincolato, le caratteristiche principali del provider con pro e contro sono appena sotto.

PROFESSIONISTI

• Grandi prestazioni di raschiatura
• Le richieste non riuscite non costano nulla
• Gestione IP intelligente
• Generosa prova gratuita

CONTRO

• I piani più economici limitano le funzionalità
• Restrizioni prestazionali sotto carico
• Casi d'uso limitati

CARATTERISTICHE PRINCIPALI

• Tipi di proxy: Datacenter, residenziale
• Protocolli: HTTP, HTTPS
• Sedi: oltre 12 paesi
• Targeting: Paese
• Autenticazione: chiave API
• Sub-utenti: Sì
• Cruscotto: sì
• Supporto: 24 ore su 24, 5 giorni su 5 (24 ore su 24, 7 giorni su 7 per le imprese)
• Prezzi: da $ 99 per 100.000 richieste

Opzioni di pagamento: Carta di credito, PayPal

Prova: 14 giorni

Servizi Zyte

Proxy del centro dati

I proxy per datacenter sono il prodotto principale di Zyte o, almeno, la base per questo. Quello che stai davvero acquistando sono le funzionalità di gestione dei proxy montate sopra e il provider ti ricorderà costantemente di "concentrarti sui dati, non sui proxy".

Quindi, non possiamo sapere con certezza quanti IP ci sono. Né ci sono molte informazioni sulla copertura della posizione: i ragazzi di Zyte ci hanno detto che ci sono 12 paesi con più di 1000 IP, e può ottenere altre posizioni su richiesta .Probabilmente Zyte noleggia proxy da altri fornitori, quindi può soddisfare le tue esigenze.

In breve, ciò che vediamo è piuttosto poco spettacolare. La parte interessante è ciò che non vediamo: la logica di gestione dei proxy di Zyte. Ecco alcune delle sue caratteristiche di base:

Limitazione delle richieste: Smart Proxy Manager esamina il sito Web che stai eseguendo lo scraping, ne stima il carico, la cronologia dei ban e quindi limita il tasso di richiesta quel tanto che basta per non essere bannato. Tentativi automatici: Smart Proxy Manager mantiene un database di diversi tipi di divieto, captcha e codici di risposta. Una volta rilevato un blocco, il sistema cambia automaticamente l'IP e ritenta la richiesta. Cookie e sessioni: i proxy possono essere configurati per memorizzare cookie, in modo che tu non abbia bisogno di farlo nel tuo crawler. Questa funzione non è disponibile con i piani più economici, che eliminano semplicemente i cookie.

Proxy residenziali

Zyte non tratta i proxy residenziali come un prodotto autonomo. Piuttosto, è un componente aggiuntivo a pagamento per i clienti che devono gestire i siti Web più indisciplinati. Sebbene avessimo accesso a un piano Enterprise personalizzato, non includeva il proxy residenziale funzionalità. Presumo che segua la stessa logica di gestione del proxy degli IP del datacenter.

Prezzi

Posizionandosi come fornitore di dati che vende anche proxy, Zyte ha un modello di prezzo corrispondente. Non addebita gli IP (lo standard del data center) o il traffico (99% dei fornitori di proxy residenziali) ma piuttosto le richieste riuscite. Esatto: tu paghi solo per i dati che ricevi.

Ci sono alcuni trucchi qua e là: ad esempio, un reindirizzamento conta come una richiesta andata a buon fine. Ma questi sono tutti dettagli; in generale, il modello di prezzo è trasparente e semplice da capire. Vorrei solo mettere in dubbio il blocco delle funzionalità. Non sono sicuro che Zyte abbia deciso che i clienti più piccoli non hanno bisogno di cose come più connessioni simultanee e whitelist IP, o se è semplicemente un tentativo di upsell.

Ecco i piani di Zyte:

Il piano Starter più economico parte da $ 29 al mese. Questo ti darà 50.000 richieste, con la possibilità di ricaricare a un costo aggiuntivo. Il piano seguente, Basic, offre 200.000 richieste per $ 99. Il piano Advanced più popolare costa $ 349 per 2,5 milioni di richieste. Quindi, è quasi tre volte più efficiente . Il piano Enterprise parte da $ 999 ed è personalizzato in base alle tue esigenze.

Test delle prestazioni

Abbiamo eseguito Smart Proxy Manager attraverso molteplici test delle prestazioni per vedere se i suoi proxy erano stabili, veloci e potevano accedere ad alcuni dei principali siti web.

Prova di qualità proxy

Come previsto, gli IP provenivano da un data center. Tutti utilizzavano il protocollo IPv4, che è ancora considerato superiore a IPv6. Abbiamo fatto molte richieste ma siamo riusciti a identificare solo 51 proxy. Non sappiamo se è perché questi erano gli unici IP che abbiamo ricevuto o se la logica di gestione dei proxy di Zyte ha deciso che non era necessario assegnarne altri per un sito Web che non li avrebbe bloccati.

Durante i giorni di test, SmartProxy Manager si è dimostrato molto stabile e il 99,91% delle richieste che abbiamo effettuato è andato a buon fine. Questo è un ottimo risultato.

Test del tasso di successo

I proxy si sono comportati particolarmente bene con i siti di e-commerce: Amazon, eBay e Craigslist hanno tutti registrato una percentuale di successo del 100%. I motori di ricerca si sono rivelati più difficili da decifrare, in particolare Google (86,72%). La sfida più difficile per Smart Proxy Manager sono state le piattaforme dei social media , Instagram in particolare. Questo è comprensibile, considerando quanto Instagram sia abusato dagli IP dei datacenter.

A causa delle misure di gestione dei proxy di Zyte, abbiamo riscontrato pochi blocchi diretti. Ogni volta che i proxy fallivano, era principalmente a causa di timeout (oltre 30 secondi). L'aumento della soglia di timeout avrebbe probabilmente migliorato ulteriormente la percentuale di successo a scapito della velocità.

Test di velocità