Обнаружение и доверие · глоссарий

Ограничение частоты запросов

Ограничение частоты запросов — это установленный сайтом предел количества запросов, которые IP-адрес, сессия или учётная запись могут отправить за определённый период. Оно обеспечивается ответами HTTP 429, задержками или временными блокировками. Прокси помогают, когда ограничение действует для адреса: ротация между множеством выходных узлов превращает предел для одного IP-адреса в управляемый вами общий бюджет. Они не помогают при ограничении по учётной записи или отпечатку и никогда не оправдывают чрезмерную нагрузку на целевой ресурс.

Время чтения: 1 минута Другие названия: регулирование частоты, HTTP 429 Обновлено:

Ограничения и добросовестное использование Все термины

К чему применяются ограничения#

  • По IP-адресу: самый распространённый вариант. Прямое решение — ротация резидентских прокси.
  • По сессии или файлу cookie: ротация не поможет; регулируйте темп в рамках сессии.
  • По учётной записи: сетевые средства не помогут; это бизнес-правило сайта.
  • По ASN или стране: встречается редко, но для хостинговых диапазонов предел часто ниже, чем для резидентских.

Разумные настройки по умолчанию#

Распределяйте запросы в течение дня, поддерживайте для каждого домена частоту, которую мог бы правдоподобно создавать человек через один выходной узел, снижайте темп при ответе 429 в соответствии с заголовком Retry-After и кэшируйте неизменяемые данные. Пул позволяет работать как множество добросовестных посетителей, а не как один недобросовестный.

Как это работает в HodlProxy#

Шлюзы HodlProxy не ограничивают частоту запросов и сами никогда не возвращают 429; такой ответ поступает только от целевого ресурса. Клиент отвечает за частоту запросов к каждому домену, а политика допустимого использования запрещает атаки на любые цели.

Начните, когда будете готовы

Проверьте на реальном запросе.

Создайте аккаунт, пополните баланс на $20 и отправьте запрос из краткого руководства к своему целевому ресурсу. Срок действия оплаченного трафика не ограничен.

Создать аккаунт Краткое руководство