Яркие данные

Основное введение

Bright Data — израильская компания, основанная в 2014 году. Она предлагает доступ ко всем типам прокси-серверов, множеству API-интерфейсов для сбора данных, парсеру без кода и даже предварительно собранным наборам данных.

Bright Data можно с уверенностью считать провайдером премиум-класса, а это означает, что его услуги стоят выше среднего по рынку и хорошо масштабируются. Это, естественно, отдает предпочтение предприятиям и клиентам с большими потребностями. Справедливости ради следует отметить, что компания предлагает возможность оплаты по мере использования, которая не требует особых обязательств. Считаете ли вы действующую ставку финансово выгодной — это другой вопрос.

Являясь провайдером общего назначения, Bright Data старается обслуживать каждый вариант использования, который считает приемлемым. Список включает в себя множество форм веб-скрапинга для сравнения цен, поисковой оптимизации и других целей — даже сбор кроссовок на столе. Но что касается провайдеров прокси, Bright Data считается очень строгим, и он без колебаний откажет в сомнительном использовании.

С технической точки зрения Bright Data — это мощный инструмент. Его прокси-серверы полны функций, которые не могут предложить многие конкуренты. Они также отлично работают: в наших тестах резидентные прокси сработали более чем в 99% случаев и были в несколько раз быстрее, чем многие альтернативы. Если не считать Oxylabs и Smartproxy, немногие провайдеры приближаются к ним по производительности или размеру пула.

Инструментарий — еще одна сильная сторона Bright Data: как инфраструктура управления прокси, так и инструменты сбора данных отточены и функциональны. На самом деле, мы были настолько впечатлены продуктами Bright Data, что присудили им награду «Лучшие инструменты для сбора данных».

Итак, Bright Data — это не проблема? Не обязательно. Несмотря на все, что она предлагает, компания не может быть лучшей для всех или для всего. И именно здесь более дешевые или более специализированные провайдеры находят возможность проскользнуть. В этом обзоре мы постараемся определить эти недостатки и то, как они могут повлиять на ваше решение.

Введение в функцию

ПЛЮСЫ

• Отличная инфраструктура
• Все типы прокси
• Многие функции
• Мощные средства управления прокси

МИНУСЫ

• Дорогой
• Может быть трудно использовать

КЛЮЧЕВАЯ ОСОБЕННОСТЬ

• Типы прокси: центр обработки данных (выделенный, общий), домашний, интернет-провайдер, мобильный
• Веб-скрейперы: API на основе прокси, API парсинга поисковых систем, сборщик данных без кода
• Местоположения: Глобально
• Аудитория: средний и крупный бизнес
• Дополнительно: API, расширение для браузера, менеджер прокси
• Поддержка: 24/7, менеджер по работе с клиентами
• Варианты оплаты: PayPal, кредитная карта, банковский перевод, AliPay, Payoneer
• Пробный период: 7 дней (для компаний), возврат средств в течение 3 дней (для частных лиц)

профиль прокси

Bright Data — израильский поставщик инфраструктуры для сбора данных, основанный в 2014 году. В настоящее время он принадлежит британской инвестиционной компании EMK Capital.

Большинство старожилов помнят Bright Data под другим именем — Luminati. В начале 2021 года компания провела ребрендинг, сославшись на негативные коннотации, связанные с названием. (Честно говоря, Luminati звучит ужасно знакомо известной организации.)

Bright Data был одним из первых сервисов, внедривших резидентные прокси — IP-адреса, позаимствованные у компьютеров и телефонов реальных людей. В то время, когда большинство конкурентов все еще продавали IP-адреса центров обработки данных, это давало компании большое преимущество и позволяло ей вырасти в ведущего поставщика прокси-серверов. Несмотря на ужесточение конкуренции, Bright Data по сей день остается таковым, имея среди своих клиентов ведущие университеты и компании из списка Fortune 500.

Провайдер очень бережно относится к своей технологии. В середине 2022 года он судился с тремя основными конкурентами — GeoSurf, NetNut и Oxylabs — из-за патентов, касающихся ротации прокси-серверов и жилых IP-адресов.

Bright Data предлагает все доступные прокси-сети. Вы сможете выбирать между общими и выделенными IP-адресами центров обработки данных, чередующимися резидентными прокси-серверами, прокси-серверами интернет-провайдеров и мобильными IP-адресами.

Как взаимодействуют эти типы прокси? Прокси-серверы центров обработки данных лучше всего подходят для доступа к мягким целям. Резидентные прокси гораздо сложнее заблокировать, поэтому они лучше работают с защищенными целями или когда вам нужно точное покрытие местоположения. Прокси-серверы интернет-провайдеров аналогичны домашним IP-адресам, но они могут поддерживать более длительные непрерывные сеансы. А мобильные прокси еще сложнее идентифицировать, поэтому вы должны использовать их с самыми сложными веб-сайтами.

Bright Data предлагает интересную функцию Proxy Waterfall, которая автоматически выбирает лучший тип IP для задачи. Я расскажу об этом больше в разделе о пользовательском опыте.

Функции

Во-первых, есть возможность выбирать между получением общих, выделенных или чередующихся IP-адресов, где это возможно, а именно в центре обработки данных или через прокси-серверы интернет-провайдера. Например, вы можете получить 10 IP-адресов центров обработки данных и поделиться ими с несколькими другими людьми или заплатить больше и использовать их в одиночку; в качестве альтернативы вы можете купить доступ к пулу из 20 000 адресов и платить за трафик. Есть много разнообразия. Даже домашние и мобильные службы предлагают возможность эксклюзивных IP-адресов — от 3 до 200 адресов, которые никто другой не будет использовать для этого конкретного домена.

Во-вторых, Bright Data поддерживает детализированные параметры таргетинга. Каждый тип прокси имеет как минимум 50 стран. Вы можете настроить таргетинг на эти страны или углубиться и выбрать города внутри них. Домашние и мобильные услуги также позволяют сузить выбор до конкретных ASN. Эта функция все еще редко встречается среди прокси-провайдеров.

В-третьих, вы получаете гибкие варианты ротации, а также возможность одновременно устанавливать неограниченное количество запросов на подключение. По умолчанию они не такие гибкие: вы можете выбрать либо ротацию при каждом запросе, либо сохранять IP-адрес до тех пор, пока он доступен. Однако прокси-менеджер Bright Data позволяет точно настроить параметры в соответствии с вашими предпочтениями.

Цены

Как и в случае с функциями, Bright Data также очень гибок в ценообразовании. Вы можете либо платить по мере использования, либо выделять определенную сумму денег каждый месяц, чтобы получать более выгодные ставки.

Ниже приводится сравнение динамических цен агентств ИС для некоторых крупных брендов.

выделенные прокси центра обработки данных по умолчанию имеют ограниченный трафик и позволяют ориентироваться только на один веб-сайт. Если бы мы включили все домены и неограниченный таргетинг (как это делают большинство провайдеров), нам пришлось бы платить почти 4 доллара за IP за 10 прокси, что почти вдвое превышает рыночную цену. Точно так же включение опции таргетинга на город или ASN для резидентных прокси буквально удваивает цену.

Тесты производительности

Выделенные прокси-серверы для центров обработки данных

Начнем с выделенных прокси-серверов для центров обработки данных. Мы протестировали 100 IP-адресов в США, нацеленных на семь популярных целей парсинга, таких как Amazon и Craigslist. В общей сложности мы сделали около 1500 запросов на подключение на цель.