Соединения дроссельной заслонки с балансировкой нагрузки Apache

У меня есть балансировщик нагрузки с использованием apache: http://httpd.apache.org/docs/2.2/mod/mod_proxy_balancer.html

Проблема в нашей пропускной способности. Мы пытаемся получить больше, но интернет-провайдер вынужден запускать новые линии и постоянно отталкивает нас, поэтому я бы хотел уменьшить количество пауков, чтобы сохранить пропускную способность, пока мы не сможем получить больше. Я попробовал мод cband, но он не будет работать на виртуальных хостах с балансировкой нагрузки.

Существуют ли модули Apache, которые могут регулировать трафик на виртуальных хостах с балансировкой нагрузки?

1 ответ

Не модуль apache, но вы можете попробовать использовать директиву "Crawl delay" в robots.txt, чтобы замедлить пауков с хорошим поведением.

http://en.wikipedia.org/wiki/Robots_exclusion_standard

Другие вопросы по тегам