Что даёт параллелизм#
Пропускную способность. Если краулер ждёт загрузки каждой страницы 800 мс, по одному соединению он собирает 75 страниц в минуту, а по ста — 7 500. В пуле с ротацией каждому соединению также назначается другой выходной IP, поэтому число одновременно используемых адресов растёт вместе с параллелизмом.
Что ограничивает параллелизм на практике#
- Целевой ресурс: корректная частота обращений к каждому домену важнее лимитов прокси.
- Пул: для 500 одновременных сессий в Берлине в этот момент должны быть онлайн 500 домашних устройств из Берлина.
- Ваш клиент: открытые файловые дескрипторы, ресурсы DNS и пулы соединений обычно исчерпываются раньше возможностей прокси.
Как это работает в HodlProxy#
HodlProxy не ограничивает количество одновременных соединений или сессий ни в одной сети. Резидентские и мобильные прокси оплачиваются за ГБ, а выделенные адреса — за каждый IP.