ProxySite / 评论 / Zyte

中特

基本介绍

13 年来,Zyte 围绕网络抓取构建了一个完整的生态系统:一个开源抓取框架、无头浏览器、数据收集服务等等。Smart Proxy Manager 是其数据收集难题中的一个——尽管是一个非常重要的部分。

该工具的诞生是为了解决一个棘手的问题。作为网络爬虫,Zyte 的人每天都在处理代理。但是,无论他们选择哪个提供商,他们很快就会遇到阻塞和可靠性问题。最终,他们不再关注自己拥有的 IP,而是将所有精力都放在如何工作上。出现的是“世界上最智能的代理网络”。

Zyte 声称,这可以让公司更轻松、更透明地扩展其运营,并准备好在需要时帮助他们处理数十亿个请求。

有什么缺点吗?当然。更便宜的计划限制了从并发请求到客户支持的一切(周末没有帮助!)。节流和自动重试可能会保留代理,但它们也可能会减慢你的速度。没有 SOCKS5。而且,当然,IP 并不真正适合网络抓取之外的事情。

在这篇评论中,我们将尝试找出 Zyte 是否可以与占主导地位的住宅代理网络竞争。我将仔细研究 Smart Proxy Manager 的功能、性能、用户体验和客户支持。如果你有时间-受限,供应商的主要功能和优缺点如下。

优点

  • 出色的抓取性能
  • 失败的请求不计成本
  • 智能知识产权管理
  • 慷慨的免费试用

缺点

  • 更便宜的计划限制功能
  • 负载下的性能限制
  • 有限的用例

主要特征

  • 代理类型:数据中心、住宅
  • 协议:HTTP、HTTPS
  • 地点:超过 12 个国家
  • 定位:国家
  • 身份验证:API 密钥
  • 子用户:是
  • 仪表板:是的
  • 支持:24/5(企业 24/7)
  • 定价:10 万个请求 99 美元起

付款方式:信用卡、贝宝

试用期:14 天

中兴服务

数据中心代理

数据中心代理是 Zyte 的主要产品——或者至少是它的基础产品。您真正购买的是安装在顶部的代理管理功能,提供商会不断提醒您“关注数据,而不是代理”。

所以,我们无法确定有多少个 IP。也没有太多关于位置覆盖的信息:Zyte 的人告诉我们有 12 个国家/地区拥有超过 1000 个 IP,它可以按需获取其他位置.这可能是因为 Zyte 从其他提供商那里租用了代理,因此它可以满足您的需求。

简而言之,我们所看到的并不引人注目。有趣的是我们看不到的部分——Zyte 的代理管理逻辑。以下是它的一些基本功能:

请求限制 – 智能代理管理器查看您正在抓取的网站,估计其负载,禁止历史记录,然后限制请求率,使您不会被禁止。自动重试 - 智能代理管理器保留不同禁令类型、验证码和响应代码的数据库。一旦检测到块,系统会自动切换 IP 并重试请求。Cookie 和会话 - 代理可以配置为存储 cookie,这样你就不需要在你的爬虫中这样做了。这个功能不适用于更便宜的计划,它只会丢弃 cookie。

住宅代理

Zyte 不将住宅代理视为独立产品。相反,它是为需要处理最不守规矩的网站的客户提供的付费附加组件。虽然我们可以访问自定义企业计划,但它不包括住宅代理功能。我假设它遵循与数据中心 IP 相同的代理管理逻辑。

价钱

Zyte 将自己定位为恰好也出售代理的数据提供商,因此有相应的定价模型。它不是按 IP(数据中心标准)或流量(99% 的住宅代理提供商)收费,而是按成功请求收费。没错:你只需为您获得的数据付费。

这里和那里有一些问题:例如,重定向算作一次成功的请求。但这些都是细节;一般而言,定价模型透明且易于理解。我只会质疑功能锁定。我不确定 Zyte 是否已经决定较小的客户不需要更多并发连接和 IP 白名单之类的东西,或者它是否只是一种追加销售的尝试。

以下是 Zyte 的计划:

最便宜的 Starter 计划起价为每月 29 美元。这将为您提供 50,000 个请求,并能够额外付费。下面的基本计划以 99 美元的价格提供 200,000 个请求。最受欢迎的 Advanced 计划为 250 万个请求花费 349 美元。因此,它的效率几乎提高了三倍. Enterprise 计划起价 999 美元,可根据您的需求量身定制。

性能测试

我们通过多次性能测试运行 Smart Proxy Manager,以查看其代理是否稳定、快速,以及是否可以访问一些主要网站。

代理质量测试

proxysite

不出所料,IP来自一个数据中心。它们都使用了IPv4协议,该协议仍然被认为优于IPv6。我们提出了很多请求,但只能识别出51个代理。我们不知道是因为这些是我们收到的唯一 IP,还是 Zyte 的代理管理逻辑决定没有必要为不会阻止它们的网站分配更多 IP。

经过几天的测试,SmartProxy Manager 被证明非常稳定,我们发出的请求成功率为 99.91%。这是一个很好的结果。

成功率测试

proxysite

代理在电子商务网站上的表现尤其出色:Amazon、eBay 和 Craigslist 的成功率均为 100%。事实证明,搜索引擎更难破解,尤其是 Google (86.72%)。Smart Proxy Manager 面临的最大挑战是社交媒体平台,尤其是 Instagram。考虑到 Instagram 被数据中心 IP 滥用的程度,这是可以理解的。

由于 Zyte 的代理管理措施,我们很少遇到直接阻塞。每当代理失败时,主要是因为超时(超过 30 秒)。增加超时阈值可能会以牺牲速度为代价提高成功率。

速度测试

Proxy Site
Proxy Site
2023-04-26 15:57:03
阅读其他用户评论