Фактор 1: География
Физическое расстояние между вашим сервером, нашим прокси и целевым веб-сайтом является наиболее значимым фактором.- Сценарий: Ваш сервер для парсинга находится в Нью-Йорке, ваш прокси - в Австралии, а целевой сайт - в Лондоне. Вашим данным приходится путешествовать по всему миру и обратно.
- Решение: Выбор ближайшей геолокации. Постарайтесь выбрать геолокацию прокси, которая физически близка либо к вашему серверу, либо к целевому сайту.
- Если целевой сервер работает быстро, выбирайте прокси ближе к вашему серверу.
- Если целевой сервер медленный, выбирайте прокси ближе к целевому.
Фактор 2: Производительность целевого сайта
Часто узким местом является не прокси, а сайт, с которого вы собираете информацию.- Как проверить: Попробуйте сделать тот же запрос к известному быстрому сайту (например,
google.com) через тот же прокси.- Если запрос к Google выполняется быстро: Проблема заключается в вашем исходном целевом сайте, а не в нашем прокси.
- Если запрос к Google также медленный: Проблема может заключаться в прокси-соединении.
Фактор 3: Конкретный резидентный IP-адрес
Резидентные и мобильные IP-адреса - это реальные устройства, и скорость их соединения может быть разной. Иногда вам может быть присвоен IP в более медленной сети.- Решение: Ротация IP. Просто сделайте следующий запрос с новым ID сессии (или без ID сессии), чтобы получить новый IP-адрес из нашего пула. Подавляющее большинство IP-адресов в нашей сети находятся на высокоскоростных соединениях.