Как отключить яндекс в tomcat?
Известно, что пауки Yandex.ru не подчиняются robots.txt. В Apache вы можете отключить яндекс в файле htaccess. Как я могу сделать то же самое с Tomcat? Я использую сервер Ubuntu, поэтому я думал о соответствующих записях в hosts.deny, но я не уверен, если
ALL: yandex.ru
будет достаточно и эффективно, потому что бот часто называют как spider31.yandex.ru. Не могли бы вы показать пример блокировки этого бота через hosts.deny (или любым другим способом)?
1 ответ
Вы хотите поместить это в hosts.deny:
ВСЕ: .yandex.ru
Обратите внимание. что означает любой поддомен.