Как я могу предложить Google сканировать новый файл robots.txt?
Я только что обновил свой файл robots.txt на новом сайте; Google Webmaster Tools сообщает, что он прочитал мой robots.txt за 2 дня до моего последнего обновления. у моего последнего файла robots.txt был "disallow: all" raw.
Можно ли как-нибудь посоветовать Google перечитать мой robots.txt как можно скорее?
На данный момент Google не сканирует мой сайт. Пожалуйста, помогите мне!
1 ответ
Вы должны быть в состоянии заставить Google сканировать и индексировать ваш сайт с помощью функции "Получить как Google", описанной здесь:
https://support.google.com/webmasters/answer/1352276?hl=en
После этого Google должен соблюдать новый robots.txt.