Zyte

Základní úvod

Za 13 let společnost Zyte vybudovala kolem webového scrapingu celý ekosystém: open-source framework pro scraping, bezhlavý prohlížeč, služby sběru dat a další. Smart Proxy Manager tvoří jeden – i když velmi důležitý – kousek skládačky jeho sběru dat.

Tento nástroj se zrodil jako interní řešení nepříjemného problému. Chlapci ze společnosti Zyte se jako škrabači webu zabývali proxy servery každý den. Bez ohledu na to, kterého poskytovatele si vybrali, brzy narazili na problémy s blokováním a spolehlivostí. přestali se soustředit na to, jaké IP mají, a místo toho vložili veškeré své úsilí do toho, jak fungovali. Vznikla „nejchytřejší síť proxy na světě“.

Společnost Zyte tvrdí, že to společnostem umožňuje snadněji a transparentněji škálovat jejich operace a je připravena jim v případě potřeby pomoci oslovit miliardy požadavků.

Nějaké nedostatky? Jistě. Levnější plány omezují vše od souběžných požadavků po zákaznickou podporu (žádná pomoc o víkendech!). Omezení a automatické opakování mohou zachovat proxy, ale mohou vás také zpomalit. Nejsou žádné SOCKS5. A samozřejmě, IP adresy nejsou opravdu vhodné pro věci mimo web scraping.

V této recenzi se pokusíme zjistit, zda Zyte může konkurovat dominantním rezidenčním proxy sítím. Podívám se blíže na funkce, výkon, uživatelskou zkušenost a zákaznickou podporu Smart Proxy Manager. Pokud máte čas- omezeno, klíčové funkce poskytovatele s klady a zápory jsou níže.

KLADY

• Skvělý škrabací výkon
• Neúspěšné žádosti nic nestojí
• Inteligentní správa IP
• Velkorysá bezplatná zkušební verze

NEVÝHODY

• Levnější plány omezují funkce
• Omezení výkonu při zátěži
• Omezené případy použití

KLÍČOVÉ VLASTNOSTI

• Typy proxy: datové centrum, rezidenční
• Protokoly: HTTP, HTTPS
• Místa: 12+ zemí
• Cílení: Země
• Autentizace: API klíč
• Dílčí uživatelé: Ano
• Palubní deska: Ano
• Podpora: 24/5 (24/7 pro podniky)
• Cena: Od 99 USD za 100 000 žádostí

Možnosti platby: Kreditní karta, PayPal

Zkušební doba: 14 dní

Služby Zyte

Proxy datových center

Proxy datových center jsou hlavním produktem společnosti Zyte – nebo alespoň jeho základem. Ve skutečnosti kupujete funkce správy proxy nainstalované nahoře a poskytovatel vám bude neustále připomínat, abyste se „zaměřili na data, ne na proxy“.

Nemůžeme tedy s jistotou vědět, kolik IP adres je. Ani není mnoho informací o pokrytí polohy: kluci ze Zyte nám řekli, že existuje 12 zemí s více než 1000 IP a na požádání může získat další umístění. .Je to pravděpodobně proto, že Zyte si pronajímá proxy od jiných poskytovatelů, takže se může přizpůsobit vašim potřebám.

Stručně řečeno, to, co vidíme, je docela neokázalé. Zajímavá část je ta, kterou nevidíme – logika správy proxy serveru Zyte. Zde jsou některé z jejích základních funkcí:

Omezení požadavků – Smart Proxy Manager se podívá na webovou stránku, kterou stahujete, odhadne její zatížení, historii zákazů a poté omezí četnost žádostí tak akorát, abyste nedostali ban. Automatické opakování – Smart Proxy Manager uchovává databázi různých typů zákazů, captchas a kódů odpovědí. Jakmile systém detekuje blok, automaticky přepne IP a zopakuje požadavek. Soubory cookie a relace – servery proxy lze nakonfigurovat tak, aby ukládaly soubory cookie, abyste to nemuseli dělat ve svém prohledávači. Tato funkce není k dispozici u levnějších tarifů, které jednoduše zahazují soubory cookie.

Rezidenční Proxy

Zyte nepovažuje rezidenční proxy za samostatný produkt. Jedná se spíše o placený doplněk pro klienty, kteří se potřebují vypořádat s nejneposlušnějšími webovými stránkami. I když jsme měli přístup k vlastnímu Enterprise plánu, nezahrnoval rezidenční proxy Předpokládal bych, že se řídí stejnou logikou správy proxy jako IP adresy datových center.

Ceny

Společnost Zyte, která se staví jako poskytovatel dat, který také prodává proxy, má odpovídající cenový model. Neúčtuje podle IP (standard datových center) nebo provozu (99 % rezidenčních poskytovatelů proxy), ale podle úspěšných požadavků. Správně: vy platíte pouze za data, která získáte.

Sem tam se objeví několik problémů: například přesměrování se počítá jako úspěšný požadavek. Ale to jsou všechno detaily; obecně je cenový model transparentní a snadno pochopitelný. Zpochybnil bych pouze zámek funkcí. Nejsem si jistý, zda se Zyte rozhodl, že menší zákazníci nepotřebují věci, jako je více souběžných připojení a seznam povolených IP adres, nebo zda je to prostě pokus o upsell.

Zde jsou plány Zyte:

Nejlevnější Starter plán začíná od 29 $ měsíčně. Získáte tak 50 000 požadavků s možností dobíjení za příplatek. Následující plán Basic poskytuje 200 000 požadavků za 99 USD. Nejoblíbenější pokročilý plán stojí 349 USD za 2,5 milionu požadavků. Je tedy téměř třikrát efektivnější . Plán Enterprise začíná od 999 USD a je přizpůsoben vašim potřebám.

Výkonnostní testy

Provedli jsme Smart Proxy Manager prostřednictvím několika výkonnostních testů, abychom zjistili, zda jsou jeho proxy stabilní, rychlé a zda mají přístup k některým z hlavních webových stránek.

Test kvality proxy

Podle očekávání pocházely IP adresy z datového centra. Všechny používaly protokol IPv4, který je stále považován za lepší než IPv6. Odeslali jsme mnoho požadavků, ale dokázali jsme identifikovat pouze 51 proxy. Nevíme, jestli je to proto, že to byly jediné IP adresy, které jsme obdrželi, nebo jestli logika správy proxy serveru Zyte rozhodla, že není potřeba přidělovat více pro web, který by je neblokoval.

Během dnů testování se SmartProxy Manager ukázal jako velmi stabilní a 99,91 % požadavků, které jsme vznesli, bylo úspěšných. To je skvělý výsledek.

Test úspěšnosti

Proxy si vedly obzvláště dobře s weby elektronického obchodu: Amazon, eBay a Craigslist měly všechny 100% úspěšnost. Ukázalo se, že je těžší prolomit vyhledávače, zejména Google (86,72 %). Nejtěžší výzvou pro Smart Proxy Manager byly platformy sociálních médií. , zejména Instagram. To je pochopitelné, vezmeme-li v úvahu, jak je Instagram zneužívaný IP adresami datových center.

Díky opatřením správy proxy serveru Zyte jsme zaznamenali několik přímých bloků. Kdykoli servery proxy selhaly, bylo to většinou kvůli časovým limitům (více než 30 s). Zvýšení prahu časového limitu by pravděpodobně ještě zvýšilo úspěšnost na úkor rychlosti.

Test rychlosti