Частые вопросы о прокси IPv4: ответы по покупке, доступу и проверке

Прокси IPv4 в нашем пуле это приватные серверные адреса, доступ к которым открывается на выбранный срок: сутки, неделя, месяц или корпоративный месяц. В пуле держится около 12 000 активных адресов, трафик безлимитный, потоков до 1000 на стандартных пакетах и до 3000 на корпоративном, в пакет входят две привязки своего адреса и выдача списка в двух форматах.

Ниже собраны вопросы, которые нам задают чаще остальных. Они разложены по темам: продукт, покупка, доступ, протоколы, проверка и конкретные задачи. Ответы короткие, факты те же, что в кабинете. Там, где вопрос тянет на отдельный разбор, стоит ссылка на подробную страницу справочника.

Прокси IPv4 и устройство пула

Что такое прокси IPv4?

Это промежуточный сервер с адресом четвёртой версии протокола IP, через который идёт ваш запрос. Целевой сайт видит адрес этого сервера и отвечает на него, а программа получает ответ обратно уже по своему соединению. Механика запроса, заголовков и обратного пути расписана в материале про то, как устроен прокси IPv4 изнутри.

Чем прокси IPv4 отличаются от остальных типов доступа?

IPv4 это сам адрес, HTTP и SOCKS это способы обращения к нему. В одном пакете доступны IPv4, HTTP, HTTPS, SOCKS4 и SOCKS5: адреса одни и те же, меняется строка подключения. Докупать отдельный тип под другой софт не требуется.

Откуда берутся эти адреса?

Адреса серверные, они живут на оборудовании и в подсетях дата-центров. Отсюда стабильный отклик и предсказуемое поведение под нагрузкой: канал у серверной площадки шире домашнего и не проседает от чужого трафика. Подробности про происхождение и подсети собраны там, где разобрано, откуда берутся серверные адреса.

Сколько адресов в пуле?

Около 12 000 активных IPv4 и SOCKS5. Список открыт только клиентам сервиса и обновляется в режиме реального времени, поэтому сохранённый файл недельной давности уже отличается от того, что отдаёт кабинет сегодня.

Как устроена ротация?

Ротация автоматическая и происходит внутри пула. Запросы расходятся по разным адресам без ручных переключений, отдельной кнопки смены адреса нажимать не нужно. Именно из-за этого мы всегда просим перечитывать список перед крупным прогоном: состав пула живой, и строки, сохранённые давно, отвечают уже хуже свежих.

Нужно ли настраивать ротацию в софте?

Нет, отдельная настройка не требуется. Программа работает со списком адресов, а распределение запросов по ним задаётся её собственными правилами: A-Parser и ZennoPoster умеют брать следующую строку на каждый поток или на каждый запрос. Мы со своей стороны держим пул обновлённым, дальше выбор строки остаётся за прогоном.

Прокси каких стран попадают в список?

Пул это микс со всего мира, адреса приходят более чем из 200 стран. Выборка по отдельной стране не делается: список отдаётся целиком, разнообразие подсетей получается само собой. Для сбора открытых данных, проверки выдачи и разведения кабинетов такая схема работает ровно.

Какой уровень анонимности у этих адресов?

Прокси не подставляют в запрос служебные заголовки с исходным адресом клиента, поэтому целевой сайт видит адрес из пула. Что именно уходит в заголовках и как это проверить руками, показано в разборе про уровни анонимности прокси.

Что входит в пакет

Что вообще даёт пакет?

Пакет это срок доступа к пулу плюс лимит одновременных потоков. Внутри: адреса, безлимитный трафик, привязки, форматы выдачи и все протоколы сразу. Полная раскладка по пунктам лежит на странице про полный состав пакета по позициям.

Сколько потоков даёт пакет?

Стандартные пакеты держат до 1000 одновременных потоков, корпоративный до 3000. Поток это одно открытое соединение к целевому сайту, и софт вроде A-Parser, ZennoPoster и Key Collector показывает эту величину прямо в настройках прогона.

Складываются ли потоки двух пакетов?

Нет. Пакеты по потокам не складываются: два стандартных пакета на одном аккаунте работают каждый со своим лимитом. Рост нагрузки закрывается переходом на старший вариант.

Правда ли, что трафик безлимитный?

Да, трафик безлимитный на всех сроках доступа. Объём выкачанных страниц на выбор пакета не влияет, платите вы за срок и за число потоков. Тем, у кого прогоны идут круглосуточно и объём заранее неизвестен, спокойнее всего работается на пакетах с безлимитным трафиком.

Сколько пакетов можно держать на одном аккаунте?

Ограничений нет. Агентство спокойно держит несколько пакетов под разных клиентов, разработчик добавляет второй под отдельный проект, всё это живёт под одной учётной записью с общим балансом.

Покупка: тест, оформление, срок

Как попробовать до покупки?

Перед оплатой доступен бесплатный тест длительностью до 2 часов под ваш запрос. Заранее предугадать поведение каждого целевого сайта и каждой программы нельзя, поэтому проверка идёт на вашем софте и ваших доменах. План проверки по минутам разложен в материале про бесплатный тест на два часа.

Как запустить тест?

Порядок такой: выбрать тип прокси под свой софт, зарегистрироваться в кабинете, отправить запрос теста из меню, указать свой адрес в настройках, активировать доступ, затем написать оператору логин и тип прокси. Дальше два часа идут под вашу задачу.

Как оформить пакет?

Оформление занимает два движения: выбрать пакет в кабинете и подтвердить списание с баланса. Баланс пополняется там же, сумма и способ выбираются при пополнении. Весь путь от регистрации до первого рабочего запроса собран в материале про порядок покупки шаг за шагом.

Какой срок брать?

Разовая выгрузка каталога закрывается сутками, недельная проверка гипотезы неделей, постоянный сбор данных месяцем. Когда задача уже вышла на регулярный режим, срок берётся с запасом в одну ступень: продлевать вручную семь раз подряд утомительно. Разбор по каждому варианту лежит на странице про то, как выбрать срок доступа.

Сколько потоков заказывать?

Считаем от требуемой скорости. Число целевых страниц делим на часы прогона, получаем запросы в час, дальше умножаем на среднее время отклика из теста и добавляем примерно треть сверху под пиковые моменты, когда часть соединений висит в ожидании ответа. Цифра из теста работает точнее любой круглой величины.

Как быстро включается пакет?

Пакет включается примерно за 5 минут после оплаты. Статус меняется в списке, раздел выдачи начинает отдавать список адресов, и запросы можно пускать сразу. Оформить доступ и посмотреть все сроки можно там, где мы предлагаем оформить доступ к пулу прокси IPv4.

Доступ и выдача списка

Какие есть способы доступа?

Их два. Первый: в настройках кабинета указывается адрес машины, с которой пойдут запросы, и прокси работают без логина. Второй: берётся формат с логином и паролем, авторизация уезжает прямо в строку подключения. Оба варианта входят в пакет и подробно разобраны там, где показаны два способа доступа к пулу.

В каком формате приходит список?

Форматов два: IP:PORT для работы с привязкой своего адреса и IP:PORT:LOGIN:PASS для доступа по паре логина и пароля. Выбор формата делается в кабинете и меняется в любой момент.

# формат под привязанный адрес
45.132.19.204:8080
45.132.19.207:8080

# формат с логином и паролем
45.132.19.204:8080:user7714:kd82mq
45.132.19.207:8080:user7714:kd82mq

Список приходит ссылкой или файлом?

В кабинете доступны оба варианта: скопировать ссылку на выдачу или скачать файл. Ссылку удобно отдать планировщику, тогда программа тянет свежие строки перед каждым запуском. Что делать со списком дальше, показано в материале про то, как приходит список адресов.

Сколько адресов можно привязать?

В пакет входит одновременная привязка 2 адресов. Типовой сценарий это рабочая машина и сервер либо офис и домашний кабинет сотрудника. Есть один момент для расчёта нагрузки: при двух привязанных адресах общий лимит потоков делится между ними пополам, поэтому пакет на 1000 потоков даёт по 500 на каждый адрес.

Как сменить привязанный адрес?

Привязка меняется без ограничений прямо в настройках кабинета. Провайдер с меняющимся адресом работе не мешает: администратор переписал строку и продолжил прогон. Переезд на другую машину со всеми деталями описан в разборе про смену привязанного адреса.

Протоколы: что выбрать под софт

Чем HTTP отличается от SOCKS5?

HTTP-прокси разбирает запрос на уровне протокола передачи гипертекста и умеет работать с его заголовками. SOCKS5 работает ниже, он просто проносит поток байтов до нужного хоста и порта, поэтому пропускает произвольные протоколы и умеет отдавать резолвинг имён на свою сторону. Сравнение по пунктам лежит в разборе HTTP, HTTPS и SOCKS по отличиям.

Что ставить в браузере?

Браузеру подходит и HTTP, и SOCKS5. HTTPS-страницы в обоих случаях идут через туннель по методу CONNECT, содержимое остаётся зашифрованным до целевого сервера. Пошаговая настройка профилей описана там, где показано подключение прокси в браузере.

Что выбрать парсеру?

Мы рекомендуем SOCKS5. Он держит любые порты и типы соединений, отдаёт разрешение доменных имён на сторону прокси и потому закрывает вопрос с запросами к DNS мимо посредника. Для сборщиков прайсов и выдачи это самый предсказуемый вариант, и работает он на тех же адресах пула.

Что нужно почтовой программе?

Почте нужен SOCKS5: SMTP, IMAP и POP3 ходят по своим портам, HTTP-прокси такие соединения не проносит. Строка подключения при этом остаётся привычной, меняется только схема. Сокетный вариант оформляется там же, где мы отдаём прокси SOCKS5 для программ и почтовых клиентов.

Какие порты нужны почте?

Отправка идёт на 25, 465 или 587, приём на 993 для IMAP и 995 для POP3. Порт 587 с обязательной аутентификацией берут чаще остальных, 465 держит шифрование с самого начала соединения. Что выбрать под конкретный почтовый сервер, разобрано на странице про порты 25, 465 и 587.

Проверка после подключения

Как убедиться, что прокси работает?

Один запрос через curl на сервис, который возвращает адрес: ответ должен показать адрес из пула. Затем тот же запрос на целевой домен, чтобы увидеть реальный код ответа. Порядок проверки от первой команды до массового прогона расписан в материале про то, как проверить работу прокси.

# адрес на выходе и код ответа целевого домена
curl -x socks5h://45.132.19.204:1080 https://ifconfig.io
curl -x socks5h://45.132.19.204:1080 -o /dev/null -w "%{http_code} %{time_total}\n" https://example.com

Чем проверять список пачкой?

Мы рекомендуем чекер от Zennolab, у него есть демонстрационная версия. Он проходит список целиком и показывает отвечающие строки, время отклика и тип прокси. Если число рабочих строк совпало с ожиданием, настройка закончена.

Как измерить время отклика?

Отклик измеряется на своём целевом домене, повторными запросами, с записью распределения. Одиночный замер по общему чекеру показывает погоду в вакууме: интересна медиана по нескольким десяткам запросов и разброс между ними. Методика с командами и разбором полей приведена в материале про измерение скорости и отклика.

Коды ответов: 407 и 403

Что делать при ответе 407?

Ответ 407 приходит от самого прокси и говорит про авторизацию. Сверяем три вещи: формат строки подключения, пару логина и пароля, привязанный в кабинете адрес машины. Часть программ ждёт логин и пароль отдельными полями и ломает строку, склеенную через двоеточие. Полный порядок разбора собран на странице про ошибку 407 по шагам.

# смотрим, дошёл ли заголовок авторизации до прокси
curl -v -x http://user7714:[email protected]:8080 https://ifconfig.io 2>&1 | grep -i "Proxy-Auth"

Что делать при ответе 403?

Ответ 403 приходит уже от целевого сайта: он получил запрос и отказался его обслуживать. Смотрим на частоту запросов, набор заголовков, отпечаток клиента и поведение сессии. Обычно помогает снижение темпа и приведение заголовков к виду, который отдаёт настоящий браузер. Разбор причин по типам площадок лежит в материале про ответ 403 при работе через прокси.

Что смотреть, когда ошибок нет, но данные странные?

Проверяем запросы к системе доменных имён и отпечаток браузера. Программа иногда резолвит имена мимо посредника, и тогда адрес на выходе выглядит верным, при этом поведение сайта не сходится с ожидаемым. В SOCKS5 резолвинг передаётся на сторону прокси одной настройкой, в браузерах и парсерах для этого есть отдельная галочка.

Как понять, что упёрлись в лимит потоков?

Софт показывает очередь ожидающих соединений, а часть запросов возвращается с отказом соединения. Первое, что мы просим сверить, это число привязанных адресов: при двух привязках лимит делится пополам, и расчёт по полной цифре перестаёт сходиться. Второе это настройки самого прогона, где заданное число потоков нередко выше того, которое реально нужно задаче.

Под какие задачи подходит пул

Подойдёт ли под сбор данных?

Да, это основной сценарий. Серверные адреса держат высокий темп, безлимитный трафик снимает вопрос объёма, до 1000 потоков хватает большинству прогонов. Мы собрали типовые настройки прогонов там, где показаны серверные прокси под сбор данных.

Подойдёт ли под съём позиций?

Да. Съём выдачи упирается в частоту запросов с одного адреса, и автоматическая ротация внутри пула снимает эту нагрузку. Key Collector и A-Parser принимают список прямо ссылкой на выдачу.

Подойдёт ли под несколько кабинетов?

Да, разные кабинеты разводятся по разным адресам из пула вместе с отдельными профилями браузера. Отпечаток при этом задаётся антидетект-браузером, а адрес приходит от прокси. Как это устроено у команд, показано на странице про приватные адреса для рабочих кабинетов.

Подойдёт ли под отправку почты?

Да, при работе по SOCKS5 через порты 465 или 587. Почтовый клиент настраивается на сокетный прокси, дальше письмо уходит с адреса из пула, и заголовок Received показывает уже его. Приём по IMAP и POP3 идёт тем же порядком, меняются только номера портов.

Подойдёт ли под проверку своего сайта из другой сети?

Да, и это самая короткая из типовых задач. Сутки доступа и пара десятков потоков закрывают проверку доступности, вёрстки и поведения формы для стороннего посетителя. Отклик при этом мы советуем снимать несколькими сериями, чтобы отделить разовый всплеск от устойчивой картины.

Продление, второй пакет и переезд

Что происходит, когда срок закончился?

Доступ к выдаче закрывается, при этом учётная запись и настройки привязки сохраняются. Возобновление занимает минуты: пакет оформляется заново и включается примерно за те же 5 минут. Пакет, продлённый заранее, работает без паузы.

Как поднять нагрузку, если потоков стало мало?

Берём пакет со старшим лимитом. Складывать потоки нескольких пакетов нельзя, поэтому рост закрывается переходом на корпоративный вариант с лимитом до 3000 потоков. Сезонный пик удобно закрыть коротким сроком и вернуться к прежнему режиму.

Как перенести работу на другую машину?

Меняем привязанный адрес в настройках и повторяем короткую проверку на новой машине. Настройки софта переносятся как есть: адреса и порты в списке остаются теми же. Если машина в работе первый раз, полезен разбор про первое подключение по шагам.

Что нужно проверить после любого переезда?

Три вещи: адрес на выходе, код ответа целевого домена и время отклика. Пять минут на эти замеры экономят час поиска причины, когда прогон уже запущен и логи наполняются отказами. Все параметры пакета, которые при этом важны, перечислены на странице пакетов прокси IPv4.

Частые вопросы

Сколько прокси держится в онлайне?

Онлайн держится в районе 12 000 адресов в сутки. Это активные IPv4 и SOCKS5, доступ к ним открыт клиентам сервиса. Число живое, поэтому от прогона к прогону состав списка отличается.

Как часто обновляется список адресов?

Список адресов обновляется в режиме реального времени. Практический вывод простой: перед крупным прогоном список перечитывается из кабинета. Ссылку на выдачу можно отдать планировщику, тогда свежие строки подтягиваются автоматически перед каждым запуском.

Как оплачивать доступ?

Оплата идёт через личный кабинет: выбирается сумма и способ пополнения баланса, дальше пакет оформляется списанием с него. Баланс удобно держать заранее, когда пакеты берутся регулярно, тогда шаг оплаты не задерживает запуск.

Аккаунт не активируется, что делать?

Напишите по контактам на сайте, вам помогут запустить учётную запись. Оператору полезно сразу передать логин и тип прокси: тогда ответ приходит одним сообщением и переписка не растягивается на день.

Дальше по конкретным сценариям в этом же разделе разобраны съём позиций и работа с выдачей с расчётом потоков под объём семантики, сбор прайсов и остатков поставщиков для интернет-магазина и несколько кабинетов одной компании с разведением профилей по адресам. Если задача пока сформулирована в общих чертах, начните со страницы про то, какие прокси покупать под конкретную задачу.