Прокси США — американский пул IP от побережья до побережья

Почему география так важна?

США не ведут себя как единый рынок. Цены, остатки, расчёт налога, сроки доставки и даже показываемый каталог товаров могут различаться по штатам. Страница одного ритейлера, открытая из Нью-Йорка и из Техаса, может дать разную итоговую сумму за один и тот же товар. Поэтому в задачах, нацеленных на США, «выбрать страну» часто недостаточно: на результат влияет и то, с какого побережья вы смотрите.

Второе измерение — расстояние. Задержка внутри континента между восточным и западным побережьем ощутима. Выбор выхода поближе к региону вашего целевого сервера улучшает и время, и долю успешных запросов.

Путь запроса: от выхода до цели

Выбирайте город выхода по тому побережью, где находится ваша аудитория. Задержку измеряйте инструментом тест пинга из собственной сети.

Покрытие по городам и типам

В четырёх крупнейших мегаполисах баланс пула разный. На восточном побережье шире предложение ISP и datacenter, на западном — глубже residential.

Доли показывают состав пула, а не абсолютную ёмкость. Для работы с аккаунтами эффективнее residential в Лос-Анджелесе и Нью-Йорке, для объёмного сбора — datacenter в Далласе.

Схема сбора данных в масштабе

Самая частая ошибка при сборе данных по США — пропускать каждый запрос через дорогой пул. Ступенчатый поток собирает те же данные заметно дешевле.

Последний шаг критичен: страница проверки, отдающая код 200, незаметно портит данные. Подробности ступенчатой архитектуры когда достаточно datacenter мы разобрали в нашей статье.

Поисковая выдача и проверка рекламы

США — один из рынков, где выдача сильнее всего зависит от местоположения. Три разных набора результатов по одному запросу из трёх штатов — обычное дело. Поэтому команды, отслеживающие позиции, строят замеры не на уровне страны, а на уровне штата. Та же чувствительность действует и в рекламных показах: чтобы убедиться, что кампания выходит в нужном регионе и с нужным креативом, нужна проверка рекламы и её настройка.

Ритейл и мониторинг цен

У крупных ритейлеров данные о ценах и наличии различаются от магазина к магазину. Варианты доставки, купоны и расчёт налога, зависящие от почтового индекса, заметно меняют итоговую сумму. Поэтому в мониторинге цен по США данные с одной точки выхода остаются неполными. Методику смотрите на странице сравнение цен и в разделе прокси для e-commerce — там же разобраны сценарии.

Бесплатные адреса США и их ограничения

В нашем бесплатном списке можно включить фильтр US. Эти адреса удобны для интеграционного теста и разовой проверки, но крупные платформы США очень насторожённо относятся к общим бесплатным адресам. Для боевых задач нужен выделенный выход. Имеющиеся адреса проверьте инструментом проверка proxy и оцените уровень анонимности тестом анонимности .

Часовые пояса и план работ

США охватывают четыре основных часовых пояса, и это напрямую влияет на план сбора. Когда на восточном побережье начинается рабочий день, на западном ещё полночь; единый план означает, что на половине целей вы работаете не в то время. Для сайтов ритейла самое спокойное окно обычно приходится на промежуток от полуночи до раннего утра по местному времени цели.

Практичный подход — разметить список целей по регионам и задать для каждой группы отдельное расписание. Идти регион за регионом, а не запускать сразу обход по всей стране, и нагрузку распределяет, и снижает вероятность блокировки.

Ещё одна деталь — часовой пояс браузера. Если выходной IP указывает на Лос-Анджелес, а часовой пояс браузера — на Стамбул, возникает противоречие, которое поведенческий анализ замечает мгновенно. При работе с автоматизацией выставляйте часовой пояс по городу выхода; почему это так, объясняем в материале отпечаток браузера и сопоставление с proxy мы разобрали в нашей статье.

Налоги и логика цен на уровне штата

В США налог с продаж определяется не на федеральном уровне, а на уровне штата и даже муниципалитета. Сумма корзины по одному и тому же товару меняется в зависимости от адреса доставки. В одних штатах отдельные категории товаров освобождены от налога, в других добавляются городские ставки. Поэтому «цена товара» сама по себе не является осмысленными данными: её нельзя записывать, не указав, из какой локации она получена.

То же касается доставки. Порог бесплатной отправки, ориентировочный срок и опция самовывоза различаются по почтовому индексу. Командам, которые анализируют конкурентов, нужно собирать и эти поля; отслеживание одной лишь цены на ценнике даёт искажённую картину.

Стройте модель данных соответственно: добавляйте в каждую запись штат выхода и почтовый индекс. Так вы сможете отслеживать изменения по регионам и видеть, где именно запускались акции. Методику мы описали на странице сравнение цен смотрите на нашей странице.

Устранение неполадок на целях в США

Появляется страница проверки. Сначала снизьте скорость, затем поднимите тип выхода. Порядок важен: на datacenter-выходе снижение скорости чаще всего не помогает, а на residential даёт заметный эффект.

Цены выглядят несогласованно. Чаще всего виновата грязная сессия. Когда переносятся cookie предыдущего региона, сайт помнит старое местоположение. Для каждого региона начинайте сессию с нуля.

Время ответа сильно скачет. Проверьте расстояние между городом выхода и целевым сервером. Обращение к цели на восточном побережье с западного добавляет заметную задержку даже внутри континента.

Один товар — разные цены на разных страницах. Часть ритейлеров применяет персонализацию. Данные, собранные в чистой сессии и в одном временном окне, почти полностью убирают этот шум.

Как правильно рассчитать размер пула

Самая частая ошибка планирования на целях в США — считать размер пула по количеству запросов. Решает не общее число запросов, а скорость запросов в секунду на один IP. Измерьте безопасную скорость для каждой цели опытным путём и разделите на неё свою общую скорость — так вы получите реальную потребность в пуле.

Когда добавляется таргетинг по штату, расчёт меняется: чем уже фильтр, тем меньше онлайн-узлов в регионе и тем чаще повторяются одни и те же адреса. При узких фильтрах по штату снизить скорость эффективнее, чем увеличивать пул.

Формулу и методику замера смотрите в статьях расчёт размера пула и лимит параллельных запросов Адреса своего пула можно проверять массово — для этого инструмент проверки прокси вполне достаточно.

Связанные локации

Чтобы расширить покрытие Северной Америки — Канада, а чтобы построить мост в сторону Европы — Великобритания и Нидерланды эти выходы можно использовать вместе. Полный список: локации proxy.