Почему googlebot запрашивает robots.txt с моего SSH-сервера?
Я запускаю ossec на своем сервере и периодически получаю предупреждение, подобное этому:
Received From: myserver->/var/log/auth.log
Rule: 5701 fired (level 8) -> "Possible attack on the ssh server (or version gathering)."
Portion of the log(s):
Nov 19 14:26:33 myserver sshd[2105]: Bad protocol version identification 'GET /robots.txt HTTP/1.1' from 66.249.73.226
IP-адрес всегда соответствует сканеру Google. Но почему в мире googlebot пытается индексировать мой SSH сервер? Мы запускаем SSH на стандартном, хорошо известном порту (22), поэтому кажется, что Google лучше знает, чем искать там веб-сервер. И мы определенно не опубликовали никаких ссылок, которые бы заставили его поверить в обратное.
1 ответ
Вы искали в Google <Your IP>:22? Я уверен, что вы нигде не публиковали его, как вы говорите, но любой старый идиот может разместить ссылку в любом месте, которое может заметить робот googlebot. Был ли у вас этот блок IP какое-то время?
Кажется гораздо менее вероятным, хотя и не невозможным, что Google начинает что-то делать с "темной сетью", о которой они говорили ранее (поиск портов, обычно не защищенных брандмауэром, для скрытых веб-серверов).
Пару лет назад на форуме Google был задан вопрос, который бесполезен: кто-то видел его на своем почтовом сервере: