Ускорение перезагрузки robots.txt

SmileP
На сайте с 18.02.2010
Offline
385
796

При обновлении ошибочно закрыли от индексации весь сайтв robots.txt Гугл успел съесть этот файл.

Вопрос- как можно обновить или ускорить, чтобы Гугл взял текущий robots.txt?

В яндекс вебмастере есть кнопка- загрузить роботс с сайта. В гугл вебмастере не нашел такого.

И в сервесе "Просмотреть как Googlebot" роботс при загрузке имеет статус "Запрещено в файле robots.txt", что логочино. Но не будет ли проблем с обновлением этого файла?

Vpr0
На сайте с 18.07.2012
Offline
9
#1

у меня тоже такое было, просто подождал и никаких проблем

E
На сайте с 21.09.2009
Offline
283
#2
SmileP:
как можно обновить или ускорить, чтобы Гугл взял текущий robots.txt?

никак, только ждать. Гугле бот не вывешивает расписания когда прийдет в следующий раз.

Алзим
На сайте с 10.06.2010
Offline
110
#3
SmileP:
При обновлении ошибочно закрыли от индексации весь сайтв robots.txt Гугл успел съесть этот файл.

Как Гугл ещё раз зайдёт, так прочитает. Чтобы зашёл быстрее, попробуйте кинуть ссылку на какую-нибудь страницу вашего сайта на ресурс, который Гугл часто посещает.

vandamme
На сайте с 30.11.2008
Offline
662
#4

вы логи сайта смотрели хоть раз? гугл кушает robots.txt по 10-30 раз в день

SmileP
На сайте с 18.02.2010
Offline
385
#5

Всем спасибо, скушал:) скармливаю страницы..

Trafikgon
На сайте с 24.10.2008
Offline
174
#6

Уменя тоже бывает просто жду и дубли выпадают тоже тупо ждать.

. (#)
E
На сайте с 21.09.2009
Offline
283
#7
vandamme:
гугл кушает robots.txt по 10-30 раз в день

он его кушает перед сканированием сайта. А вот попробуйте в нем закрыть сайт сколько времени займет повторное включение на сканировани и индексацию? У меня 2-е суток для нового сайта заняло.

SmileP
На сайте с 18.02.2010
Offline
385
#8
Trafikgon:
тоже тупо ждать

Траф просел - процентов на 80, некогда ждать :)

easywind:
У меня 2-е суток для нового сайта заняло.

Часа за 2 обновился, если сообщение в вебмастерке верное.

Меня печалит, что некоторые страницы имеют статус- запрещен в robots.txt

Попробую ссылок добавить на важные урлы.

E
На сайте с 21.09.2009
Offline
283
#9
SmileP:
некоторые страницы имеют статус- запрещен в robots.txt

а говорите "обновился" :)

SmileP
На сайте с 18.02.2010
Offline
385
#10
easywind:
а говорите "обновился"

В вебмастерке обновился. Некоторые страницы вернулись, позиции возвращаются.

Робот должен зайти на страницу, чтобы она вернулась в индекс :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий