ज़ाइट

मूल परिचय

13 वर्षों में, Zyte ने वेब स्क्रैपिंग के आसपास एक संपूर्ण पारिस्थितिकी तंत्र का निर्माण किया है: एक ओपन-सोर्स स्क्रैपिंग फ्रेमवर्क, हेडलेस ब्राउज़र, डेटा संग्रह सेवाएं, और बहुत कुछ। स्मार्ट प्रॉक्सी मैनेजर अपनी डेटा संग्रह पहेली का एक - यद्यपि एक बहुत ही महत्वपूर्ण - टुकड़ा बनाता है।

यह टूल एक गंभीर समस्या के इन-हाउस समाधान के रूप में पैदा हुआ था। वेब स्क्रेपर्स के रूप में, Zyte के लोग हर दिन प्रॉक्सी से निपटते थे। हालांकि, इससे कोई फर्क नहीं पड़ता कि वे किस प्रदाता को चुनते हैं, वे जल्द ही ब्लॉक और विश्वसनीयता के साथ समस्याओं में भाग लेंगे। , उन्होंने इस बात पर ध्यान देना बंद कर दिया कि उनके पास कौन से आईपी हैं, और इसके बजाय वे कैसे काम करते हैं, इस पर अपना सारा प्रयास लगा दिया। जो उभरा वह 'दुनिया का सबसे स्मार्ट प्रॉक्सी नेटवर्क' था।

Zyte का दावा है कि इससे कंपनियों को अपने संचालन को अधिक आसानी से और पारदर्शी रूप से स्केल करने की सुविधा मिलती है, और यदि आवश्यक हो तो यह अरबों अनुरोधों तक पहुँचने में उनकी मदद करने के लिए तैयार है।

कोई कमियां? ज़रूर।सस्ती योजनाएँ समवर्ती अनुरोधों से लेकर ग्राहक सहायता तक सब कुछ सीमित करती हैं (सप्ताहांत पर कोई मदद नहीं!)। थ्रॉटलिंग और स्वचालित पुनर्प्रयास प्रॉक्सी को संरक्षित कर सकते हैं, लेकिन वे आपको धीमा भी कर सकते हैं। कोई SOCKS5 नहीं है। और, ज़ाहिर है, आईपी वेब स्क्रैपिंग के बाहर की चीजों के लिए वास्तव में उपयुक्त नहीं हैं।

इस समीक्षा में, हम यह पता लगाने की कोशिश करेंगे कि क्या Zyte प्रमुख आवासीय प्रॉक्सी नेटवर्क के साथ प्रतिस्पर्धा कर सकता है। मैं स्मार्ट प्रॉक्सी प्रबंधक की सुविधाओं, प्रदर्शन, उपयोगकर्ता अनुभव और ग्राहक सहायता पर करीब से नज़र डालूंगा। यदि आपके पास समय है- विवश, पेशेवरों और विपक्षों के साथ प्रदाता की प्रमुख विशेषताएं नीचे दी गई हैं।

पेशेवरों

• शानदार स्क्रैपिंग प्रदर्शन
• विफल अनुरोधों का कोई मूल्य नहीं है
• बुद्धिमान आईपी प्रबंधन
• उदार नि: शुल्क परीक्षण

दोष

• सस्ते प्लान सुविधाओं को सीमित करते हैं
• लोड के तहत प्रदर्शन प्रतिबंध
• सीमित उपयोग के मामले

प्रमुख विशेषताऐं

• प्रॉक्सी प्रकार: डाटासेंटर, आवासीय
• प्रोटोकॉल: HTTP, HTTPS
• स्थान: 12+ देश
• लक्ष्यीकरण: देश
• प्रमाणीकरण: एपीआई कुंजी
• उप-उपयोगकर्ता: हाँ
• डैशबोर्ड: हाँ
• समर्थन: 24/5 (उद्यम के लिए 24/7)
• मूल्य निर्धारण: 100k अनुरोधों के लिए $99 से

भुगतान विकल्प: क्रेडिट कार्ड, पेपैल

परीक्षण: 14 दिन

जायट सर्विसेज

डाटासेंटर प्रॉक्सी

डेटासेंटर प्रॉक्सी Zyte का मुख्य उत्पाद है - या, कम से कम, इसके लिए आधार। आप वास्तव में जो खरीद रहे हैं वह शीर्ष पर घुड़सवार प्रॉक्सी प्रबंधन सुविधाएं हैं, और प्रदाता आपको लगातार 'डेटा पर ध्यान केंद्रित करने के लिए याद दिलाएगा, प्रॉक्सी नहीं'।

इसलिए, हम निश्चित रूप से नहीं जान सकते कि कितने IP हैं। न ही स्थान कवरेज के बारे में अधिक जानकारी है: Zyte के लोगों ने हमें बताया कि 1 हजार से अधिक IP वाले 12 देश हैं, और यह मांग पर अन्य स्थान प्राप्त कर सकता है .ऐसा संभव है क्योंकि Zyte अन्य प्रदाताओं से प्रॉक्सी किराए पर लेता है, इसलिए यह आपकी आवश्यकताओं को समायोजित कर सकता है।

संक्षेप में, जो हम देखते हैं वह बहुत ही अलौकिक है। दिलचस्प हिस्सा वह है जो हम नहीं देखते हैं - Zyte का प्रॉक्सी प्रबंधन तर्क। इसकी कुछ अंतर्निहित विशेषताएं यहां दी गई हैं:

अनुरोध थ्रॉटलिंग - स्मार्ट प्रॉक्सी मैनेजर उस वेबसाइट को देखता है जिसे आप स्क्रैप कर रहे हैं, उसके लोड का अनुमान लगाता है, इतिहास पर प्रतिबंध लगाता है, और फिर अनुरोध दर को पर्याप्त रूप से सीमित करता है ताकि आप पर प्रतिबंध न लगे। स्वचालित पुनर्प्रयास - स्मार्ट प्रॉक्सी मैनेजर विभिन्न प्रकार के प्रतिबंध, कैप्चा और प्रतिक्रिया कोड का एक डेटाबेस रखता है। एक बार जब यह एक ब्लॉक का पता लगाता है, तो सिस्टम स्वचालित रूप से आईपी स्विच करता है और अनुरोध को पुनः प्रयास करता है। कुकीज़ और सत्र - कुकीज़ को संग्रहीत करने के लिए प्रॉक्सी को कॉन्फ़िगर किया जा सकता है, ताकि आपको अपने क्रॉलर में ऐसा करने की आवश्यकता न पड़े। यह सुविधा सस्ती योजनाओं के साथ उपलब्ध नहीं है, जो केवल कुकीज़ को छोड़ देती हैं।

आवासीय प्रॉक्सी

Zyte आवासीय प्रॉक्सी को एक स्टैंडअलोन उत्पाद के रूप में नहीं मानता है। बल्कि, यह उन ग्राहकों के लिए एक भुगतान ऐड-ऑन है, जिन्हें सबसे अनियंत्रित वेबसाइटों से निपटने की आवश्यकता होती है। जबकि हमारे पास एक कस्टम एंटरप्राइज़ योजना तक पहुंच थी, इसमें आवासीय प्रॉक्सी शामिल नहीं थी। कार्यक्षमता। मुझे लगता है कि यह डेटासेंटर आईपी के समान प्रॉक्सी प्रबंधन तर्क का अनुसरण करता है।

मूल्य निर्धारण

खुद को एक डेटा प्रदाता के रूप में स्थापित करना, जो प्रॉक्सी बेचने के लिए भी होता है, Zyte के पास एक समान मूल्य निर्धारण मॉडल है। यह IPs (डेटासेंटर मानक) या ट्रैफ़िक (आवासीय प्रॉक्सी प्रदाताओं का 99%) द्वारा नहीं बल्कि सफल अनुरोधों द्वारा चार्ज किया जाता है। यह सही है: आप केवल आपको मिलने वाले डेटा के लिए भुगतान करें।

यहाँ और वहाँ कुछ गठजोड़ हैं: उदाहरण के लिए, एक रीडायरेक्ट एक सफल अनुरोध के रूप में गिना जाता है। लेकिन ये सभी विवरण हैं; सामान्य तौर पर, मूल्य निर्धारण मॉडल पारदर्शी और समझने में आसान होता है। मैं केवल फीचर लॉक पर सवाल उठाऊंगा। मुझे यकीन नहीं है कि क्या Zyte ने फैसला किया है कि छोटे ग्राहकों को अधिक समवर्ती कनेक्शन और IP श्वेतसूची जैसी चीजों की आवश्यकता नहीं है, या अगर यह केवल अपसेल करने का प्रयास है।

यहाँ Zyte की योजनाएँ हैं:

सबसे सस्ता स्टार्टर प्लान $29 प्रति माह से शुरू होता है। यह आपको 50k अनुरोध देगा, अतिरिक्त शुल्क के लिए टॉप अप करने की क्षमता के साथ। निम्नलिखित योजना, बेसिक, $99 के लिए 200k अनुरोध देती है। सबसे लोकप्रिय उन्नत योजना की लागत 2.5M अनुरोधों के लिए $349 है। तो, यह लगभग तीन गुना अधिक कुशल है . एंटरप्राइज़ योजना $999 से शुरू होती है और आपकी आवश्यकताओं के अनुसार तैयार की जाती है।

प्रदर्शन जांच

हमने कई प्रदर्शन परीक्षणों के माध्यम से स्मार्ट प्रॉक्सी मैनेजर चलाया, यह देखने के लिए कि क्या इसके प्रॉक्सी स्थिर, तेज़ थे और कुछ प्रमुख वेबसाइटों तक पहुँच सकते थे।

प्रॉक्सी गुणवत्ता परीक्षण

जैसा कि अपेक्षित था, आईपी डेटा सेंटर से आए थे। वे सभी आईपीवी4 प्रोटोकॉल का उपयोग करते थे, जिसे अभी भी आईपीवी6 से बेहतर माना जाता है। हमने बहुत से अनुरोध किए लेकिन केवल 51 प्रॉक्सी की पहचान कर सके। हम नहीं जानते कि क्या यह इसलिए है क्योंकि हमें केवल यही आईपी प्राप्त हुए थे या यदि ज़ीटे के प्रॉक्सी प्रबंधन तर्क ने तय किया कि ऐसी वेबसाइट के लिए अधिक असाइन करने की कोई आवश्यकता नहीं थी जो उन्हें ब्लॉक नहीं करेगी।

परीक्षण के दिनों के दौरान, SmartProxy Manager बहुत स्थिर साबित हुआ, और हमारे द्वारा किए गए 99.91% अनुरोध सफल रहे। यह एक अच्छा परिणाम है।

सफलता दर परीक्षण

ई-कॉमर्स वेबसाइटों के साथ प्रॉक्सी ने विशेष रूप से अच्छा किया: अमेज़ॅन, ईबे और क्रेगलिस्ट सभी की सफलता दर 100% थी। खोज इंजनों को क्रैक करना कठिन साबित हुआ, विशेष रूप से Google (86.72%)। स्मार्ट प्रॉक्सी मैनेजर के लिए सबसे कठिन चुनौती सोशल मीडिया प्लेटफॉर्म थी। , विशेष रूप से Instagram। यह समझ में आता है, यह देखते हुए कि डेटासेंटर IP द्वारा Instagram का कितना दुरुपयोग किया जाता है।

Zyte के प्रॉक्सी प्रबंधन उपायों के कारण, हमने कुछ एकमुश्त ब्लॉकों का अनुभव किया। जब भी प्रॉक्सी विफल हुए, यह ज्यादातर टाइमआउट (30 से अधिक) के कारण था। टाइमआउट सीमा बढ़ने से गति की कीमत पर सफलता दर और भी बेहतर हो जाती।

स्पीड टेस्ट