ザイト

基本紹介

Zyte は 13 年以上にわたり、Web スクレイピングに関するエコシステム全体を構築してきました。オープンソースのスクレイピング フレームワーク、ヘッドレス ブラウザ、データ収集サービスなどです。Smart Proxy Manager は、非常に重要ではありますが、データ収集パズルの 1 つのピースを作成します。

このツールは、厄介な問題に対する社内ソリューションとして生まれました。Web スクレイパーとして、Zyte の担当者は毎日プロキシを扱っていました。しかし、どのプロバイダーを選択しても、すぐにブロックと信頼性の問題に直面しました。 、彼らは自分が持っているIPに焦点を当てるのをやめ、代わりに自分がどのように機能するかにすべての努力を注ぎました.そこで登場したのが「世界で最もスマートなプロキシ ネットワーク」です。

Zyte は、これにより企業はより簡単かつ透過的に事業を拡大できると主張しており、必要に応じて数十億の要求に到達するのを支援する準備ができている.

欠点はありますか?確かに。安価なプランでは、同時リクエストからカスタマー サポートまですべてが制限されます (週末は役に立ちません!)。スロットリングと自動再試行により、プロキシが保持される可能性がありますが、速度が低下する可能性もあります。SOCKS5 はありません。もちろん、IP は Web スクレイピング以外の用途にはあまり適していません。

このレビューでは、Zyte が支配的な住宅用プロキシ ネットワークと競合できるかどうかを調べます。Smart Proxy Manager の機能、パフォーマンス、ユーザー エクスペリエンス、およびカスタマー サポートを詳しく見ていきます。制約があるため、プロバイダーの主な機能と長所と短所を以下に示します.

長所

• 優れた掻き取り性能
• 失敗したリクエストの費用はかかりません
• インテリジェントな IP 管理
• 寛大な無料トライアル

短所

• 安価なプランは機能を制限します
• 負荷がかかった状態でのパフォーマンスの制限
• 限られたユースケース

主な機能

• プロキシの種類: データセンター、住宅
• プロトコル: HTTP、HTTPS
• 場所: 12か国以上
• ターゲティング: 国
• 認証: API キー
• サブユーザー: はい
• ダッシュボード: はい
• サポート: 24 時間年中無休 (企業向けは 24 時間年中無休)
• 料金: 10 万回のリクエストで 99 ドルから

お支払い方法：クレジットカード、PayPal

試用期間: 14 日間

ザイテ サービス

データセンター プロキシ

データセンター プロキシは、Zyte の主要な製品であり、少なくともその基盤となっています。実際に購入しているのは、上に搭載されたプロキシ管理機能であり、プロバイダは常に「プロキシではなくデータに集中する」ように注意を喚起します。

そのため、いくつの IP が存在するかを正確に知ることはできません。また、ロケーション カバレッジに関する情報もあまりありません。Zyte の関係者によると、12 か国に 1,000 以上の IP があり、必要に応じて他のロケーションを取得できるとのことです。 .これは、Zyte が他のプロバイダーからプロキシをレンタルしているためである可能性が高いため、お客様のニーズに対応できます。

要するに、私たちが見ているものはかなり目立たないものです。興味深い部分は、私たちが見ていない部分です - Zyte のプロキシ管理ロジックです。その基本的な機能のいくつかを次に示します。

リクエストのスロットリング – スマート プロキシ マネージャーは、スクレイピングしている Web サイトを調べ、その負荷を推定し、履歴を禁止し、禁止されないようにリクエスト レートを制限します。自動再試行 – スマート プロキシ マネージャーは、さまざまな禁止タイプ、キャプチャ、および応答コードのデータベースを保持します。ブロックを検出すると、システムは自動的に IP を切り替え、要求を再試行します。Cookie とセッション – Cookie を保存するようにプロキシを構成できます。クローラーでこれを行う必要はありません。この機能は、単に Cookie を破棄する安価なプランでは利用できません。

住宅用プロキシ

Zyte はレジデンシャル プロキシをスタンドアロン製品として扱っていません。むしろ、最も手に負えない Web サイトに対処する必要があるクライアント向けの有料アドオンです。カスタム エンタープライズ プランにアクセスできましたが、レジデンシャル プロキシは含まれていませんでした。データセンターの IP と同じプロキシ管理ロジックに従っていると思います。

価格

たまたまプロキシを販売するデータ プロバイダーとしての地位を確立している Zyte には、対応する価格モデルがあります。IP (データセンターの標準) やトラフィック (住宅用プロキシ プロバイダーの 99%) ではなく、成功したリクエストによって課金されます。取得したデータに対してのみ支払います。

いくつかの落とし穴があります。たとえば、リダイレクトは成功したリクエストとしてカウントされます。しかし、これらはすべて詳細です。一般に、価格モデルは透明で理解しやすいものです。機能のロックについてのみ質問します。Zyte が小規模な顧客は同時接続数の増加や IP ホワイトリスト化などを必要としないと判断したのか、それとも単なるアップセルの試みなのかはわかりません。

Zyte の計画は次のとおりです。

最も安いスターター プランは月額 29 ドルからです。これにより、50,000 件のリクエストが得られ、追加料金で追加料金を支払うことができます。次のプランである Basic では、200,000 件のリクエストが 99 ドルで提供されます。最も人気のある Advanced プランは、250 万件のリクエストで 349 ドルかかります。したがって、ほぼ 3 倍効率的です。 .エンタープライズ プランは 999 ドルからで、ニーズに合わせて調整できます。

性能試験

複数のパフォーマンス テストを通じて Smart Proxy Manager を実行し、そのプロキシが安定して高速で、いくつかの主要な Web サイトにアクセスできるかどうかを確認しました。

プロキシ品質テスト

予想どおり、IP はデータ センターから取得されました。それらはすべて、IPv6 よりも優れていると考えられている IPv4 プロトコルを使用していました。多くのリクエストを行いましたが、51 のプロキシしか識別できませんでした。これらが私たちが受け取った唯一の IP だったからなのか、それとも Zyte のプロキシ管理ロジックが、それらをブロックしない Web サイトにこれ以上割り当てる必要がないと判断したのかはわかりません.

数日間のテストを通じて、SmartProxy Manager は非常に安定していることが証明され、99.91% のリクエストが成功しました。これは素晴らしい結果です。

成功率テスト

プロキシは、e コマース Web サイトで特にうまく機能しました。Amazon、eBay、および Craigslist はすべて 100% の成功率を示しました。検索エンジン、特に Google (86.72%) はクラックするのがより困難であることが判明しました。Smart Proxy Manager にとって最も困難な課題は、ソーシャル メディア プラットフォームでした。 、特に Instagram です。Instagram がデータセンター IP によってどれほど悪用されているかを考えると、これは理解できます。

Zyte のプロキシ管理手段により、完全なブロックはほとんど発生しませんでした。プロキシが失敗するときはいつでも、タイムアウト (30 秒以上) が主な原因でした。タイムアウトのしきい値を大きくすると、速度が犠牲になっても成功率がさらに向上した可能性があります。

スピードテスト