dados brilhantes

Introdução básica

A Bright Data é uma empresa israelense estabelecida em 2014. Ela oferece acesso a todos os tipos de servidor proxy, várias APIs de coleta de dados, raspador da web sem código e até mesmo conjuntos de dados pré-coletados.

A Bright Data pode ser considerada com segurança um provedor premium, o que significa que seus serviços custam acima da média do mercado e escalam bem. Isso naturalmente muda a preferência para empresas e clientes com grandes necessidades. Para ser justo, a empresa oferece uma opção de pagamento conforme o uso que não exige muito compromisso. Se você achará que a taxa atual vale a pena financeiramente é outra questão.

Sendo um provedor de uso geral, a Bright Data tenta atender a todos os casos de uso que considera aceitáveis. A lista inclui muitas formas de web scraping para comparação de preços, SEO e outros propósitos – até mesmo o copping de tênis está na mesa. Mas, no que diz respeito aos provedores de proxy, o Bright Data é considerado muito rigoroso e não hesitará em negar usos questionáveis.

Do ponto de vista técnico, a Bright Data é uma potência. Seus servidores proxy estão cheios de recursos que muitos concorrentes não oferecem. Eles também têm um desempenho excelente: em nossos testes, os proxies residenciais foram bem-sucedidos em 99% das vezes e foram várias vezes mais rápidos do que muitas alternativas. Com exceção do Oxylabs e do Smartproxy, poucos provedores chegam perto em termos de desempenho ou tamanho do pool.

As ferramentas são outro dos pontos fortes da Bright Data: tanto a infraestrutura de gerenciamento de proxy quanto as ferramentas de coleta de dados são polidas e funcionais. Na verdade, ficamos tão impressionados com os produtos da Bright Data que concedemos a eles o prêmio de Melhores Ferramentas para Coleta de Dados.

Então, o Bright Data é um acéfalo? Não necessariamente. Apesar de tudo o que oferece, a empresa não pode ser a melhor para todos – ou para tudo. E é aí que os fornecedores mais baratos ou mais especializados encontram a oportunidade de escapar. Nesta revisão, tentaremos identificar essas falhas e como elas podem afetar sua decisão.

Introdução da função

PRÓS

• ótima infraestrutura
• Todos os tipos de proxy
• Muitos recursos
• Controles de proxy poderosos

CONTRAS

• Caro
• Pode ser difícil de usar

CARACTERÍSTICAS PRINCIPAIS

• Tipos de proxy: Datacenter (dedicado, compartilhado), residencial, ISP, móvel
• Web scrapers: API baseada em proxy, API de extração de mecanismo de pesquisa, coletor de dados sem código
• Locais: Global
• Público-alvo: empresas de médio a grande porte
• Extras: API, extensão do navegador, gerenciador de proxy
• Suporte: 24/7, gerente de contas
• Opções de pagamento: PayPal, cartão de crédito, transferência bancária, AliPay, Payoneer
• Avaliação: 7 dias (empresas), reembolso de 3 dias (indivíduos)

perfil de proxy

A Bright Data é uma provedora de infraestrutura de coleta de dados israelense estabelecida em 2014. Atualmente, ela pertence a uma empresa de ações com sede no Reino Unido chamada EMK Capital.

A maioria dos veteranos se lembra do Bright Data por um nome diferente, Luminati. A empresa mudou de marca no início de 2021, citando conotações negativas associadas ao nome. (Para ser justo, Luminati parece muito familiar para uma organização famosa.)

A Bright Data foi um dos primeiros serviços a introduzir proxies residenciais – IPs emprestados de computadores e telefones de pessoas reais. Na época em que a maioria dos concorrentes ainda vendia IPs de datacenter, isso deu à empresa uma grande vantagem e permitiu que ela se tornasse um provedor líder de proxy. Apesar do acirramento da concorrência, a Bright Data continua sendo uma até hoje, ostentando as melhores universidades e empresas da Fortune 500 entre seus clientes.

O provedor é muito protetor de sua tecnologia. Em meados de 2022, estava em litígio com três grandes concorrentes - GeoSurf, NetNut e Oxylabs - sobre patentes relacionadas à rotação de proxy e IPs residenciais.

A Bright Data oferece todo tipo de rede proxy disponível. Você poderá escolher entre IPs de datacenter compartilhados e dedicados, proxies residenciais rotativos, proxies ISP e IPs móveis.

Como esses tipos de proxy interagem? Os proxies do datacenter são mais adequados para acessar alvos tolerantes. Os proxies residenciais são muito mais difíceis de bloquear, por isso funcionam melhor com alvos protegidos ou quando você precisa de cobertura de localização precisa. Os proxies ISP são semelhantes aos IPs residenciais, mas podem manter sessões ininterruptas mais longas. E os proxies móveis são ainda mais difíceis de identificar, então você deve usá-los com os sites mais desafiadores.

O Bright Data oferece um recurso interessante chamado Proxy Waterfall, que escolhe automaticamente o melhor tipo de IP para a tarefa. Falo mais sobre isso na seção sobre experiência do usuário.

Características

Primeiro, há uma opção para escolher entre obter IPs compartilhados, dedicados ou rotativos onde for possível – ou seja, em datacenter ou proxies ISP. Por exemplo, você pode obter 10 IPs de datacenter e compartilhá-los com várias outras pessoas ou pagar mais e usá-los sozinho; alternativamente, você pode comprar acesso a um pool de 20.000 endereços e pagar por tráfego. Há muita variedade. Mesmo os serviços residencial e móvel oferecem a opção de IPs exclusivos – de 3 a 200 endereços que ninguém mais usará para aquele domínio específico.

Em segundo lugar, o Bright Data oferece suporte a opções de segmentação refinadas. Cada tipo de proxy vem com pelo menos 50 países. Você pode segmentar esses países ou ir mais fundo e escolher cidades dentro deles. Os serviços residenciais e móveis também permitem restringir a escolha a determinados ASNs. Esse recurso ainda é raro entre os provedores de proxy.

Em terceiro lugar, você obtém opções de rotação flexíveis, juntamente com a capacidade de estabelecer solicitações de conexão ilimitadas de uma só vez. Eles não são tão flexíveis por padrão: você pode escolher alternar a cada solicitação ou manter o IP pelo tempo que estiver disponível. No entanto, o Proxy Manager da Bright Data permite ajustar as configurações de acordo com suas preferências.

Preços

Assim como os recursos, o Bright Data também é muito flexível com seus preços. Você pode pagar conforme o uso ou comprometer uma determinada quantia de dinheiro a cada mês para obter melhores taxas.

A seguir, uma comparação dos preços dinâmicos das agências de propriedade intelectual para algumas das principais marcas.

os proxies de datacenter dedicados, por padrão, têm tráfego limitado e permitem segmentar apenas um site. Se habilitarmos todos os domínios e segmentação ilimitada (como a maioria dos provedores faz), teríamos que pagar quase US$ 4/IP por 10 proxies – ou quase o dobro do preço de mercado. Da mesma forma, ativar a opção de segmentação por cidade ou ASN para os proxies residenciais literalmente dobra o preço.

Benchmarks de desempenho

Proxies de Datacenter Dedicados

Vamos começar com os proxies de datacenter dedicados. Testamos 100 IPs nos EUA visando sete alvos de raspagem populares como Amazon e Craigslist. No total, fizemos cerca de 1.500 solicitações de conexão por destino.