中特

基本介绍

13 年来，Zyte 围绕网络抓取构建了一个完整的生态系统：一个开源抓取框架、无头浏览器、数据收集服务等等。Smart Proxy Manager 是其数据收集难题中的一个——尽管是一个非常重要的部分。

该工具的诞生是为了解决一个棘手的问题。作为网络爬虫，Zyte 的人每天都在处理代理。但是，无论他们选择哪个提供商，他们很快就会遇到阻塞和可靠性问题。最终，他们不再关注自己拥有的 IP，而是将所有精力都放在如何工作上。出现的是“世界上最智能的代理网络”。

Zyte 声称，这可以让公司更轻松、更透明地扩展其运营，并准备好在需要时帮助他们处理数十亿个请求。

有什么缺点吗？当然。更便宜的计划限制了从并发请求到客户支持的一切（周末没有帮助！）。节流和自动重试可能会保留代理，但它们也可能会减慢你的速度。没有 SOCKS5。而且，当然，IP 并不真正适合网络抓取之外的事情。

在这篇评论中，我们将尝试找出 Zyte 是否可以与占主导地位的住宅代理网络竞争。我将仔细研究 Smart Proxy Manager 的功能、性能、用户体验和客户支持。如果你有时间-受限，供应商的主要功能和优缺点如下。

优点

• 出色的抓取性能
• 失败的请求不计成本
• 智能知识产权管理
• 慷慨的免费试用

缺点

• 更便宜的计划限制功能
• 负载下的性能限制
• 有限的用例

主要特征

• 代理类型：数据中心、住宅
• 协议：HTTP、HTTPS
• 地点：超过 12 个国家
• 定位：国家
• 身份验证：API 密钥
• 子用户：是
• 仪表板：是的
• 支持：24/5（企业 24/7）
• 定价：10 万个请求 99 美元起

付款方式：信用卡、贝宝

试用期：14 天

中兴服务

数据中心代理

数据中心代理是 Zyte 的主要产品——或者至少是它的基础产品。您真正购买的是安装在顶部的代理管理功能，提供商会不断提醒您“关注数据，而不是代理”。

所以，我们无法确定有多少个 IP。也没有太多关于位置覆盖的信息：Zyte 的人告诉我们有 12 个国家/地区拥有超过 1000 个 IP，它可以按需获取其他位置.这可能是因为 Zyte 从其他提供商那里租用了代理，因此它可以满足您的需求。

简而言之，我们所看到的并不引人注目。有趣的是我们看不到的部分——Zyte 的代理管理逻辑。以下是它的一些基本功能：

请求限制 – 智能代理管理器查看您正在抓取的网站，估计其负载，禁止历史记录，然后限制请求率，使您不会被禁止。自动重试 - 智能代理管理器保留不同禁令类型、验证码和响应代码的数据库。一旦检测到块，系统会自动切换 IP 并重试请求。Cookie 和会话 - 代理可以配置为存储 cookie，这样你就不需要在你的爬虫中这样做了。这个功能不适用于更便宜的计划，它只会丢弃 cookie。

住宅代理

Zyte 不将住宅代理视为独立产品。相反，它是为需要处理最不守规矩的网站的客户提供的付费附加组件。虽然我们可以访问自定义企业计划，但它不包括住宅代理功能。我假设它遵循与数据中心 IP 相同的代理管理逻辑。

价钱

Zyte 将自己定位为恰好也出售代理的数据提供商，因此有相应的定价模型。它不是按 IP（数据中心标准）或流量（99% 的住宅代理提供商）收费，而是按成功请求收费。没错：你只需为您获得的数据付费。

这里和那里有一些问题：例如，重定向算作一次成功的请求。但这些都是细节；一般而言，定价模型透明且易于理解。我只会质疑功能锁定。我不确定 Zyte 是否已经决定较小的客户不需要更多并发连接和 IP 白名单之类的东西，或者它是否只是一种追加销售的尝试。

以下是 Zyte 的计划：

最便宜的 Starter 计划起价为每月 29 美元。这将为您提供 50,000 个请求，并能够额外付费。下面的基本计划以 99 美元的价格提供 200,000 个请求。最受欢迎的 Advanced 计划为 250 万个请求花费 349 美元。因此，它的效率几乎提高了三倍. Enterprise 计划起价 999 美元，可根据您的需求量身定制。

性能测试

我们通过多次性能测试运行 Smart Proxy Manager，以查看其代理是否稳定、快速，以及是否可以访问一些主要网站。

代理质量测试

不出所料，IP来自一个数据中心。它们都使用了IPv4协议，该协议仍然被认为优于IPv6。我们提出了很多请求，但只能识别出51个代理。我们不知道是因为这些是我们收到的唯一 IP，还是 Zyte 的代理管理逻辑决定没有必要为不会阻止它们的网站分配更多 IP。

经过几天的测试，SmartProxy Manager 被证明非常稳定，我们发出的请求成功率为 99.91%。这是一个很好的结果。

成功率测试

代理在电子商务网站上的表现尤其出色：Amazon、eBay 和 Craigslist 的成功率均为 100%。事实证明，搜索引擎更难破解，尤其是 Google (86.72%)。Smart Proxy Manager 面临的最大挑战是社交媒体平台，尤其是 Instagram。考虑到 Instagram 被数据中心 IP 滥用的程度，这是可以理解的。

由于 Zyte 的代理管理措施，我们很少遇到直接阻塞。每当代理失败时，主要是因为超时（超过 30 秒）。增加超时阈值可能会以牺牲速度为代价提高成功率。

速度测试