Косяк с robots.txt

S
На сайте с 08.08.2007
Offline
39
887

Приветствую ув. оптимизаторы.

Случился небольшой косяк с роботс. В то время, когда сайт был в тестовом режиме, в роботс было прописано:


User-agent: *
Disallow: /

Т.е. от робота был скрыт весь сайт. Сутки назад были внечены изменения и открыты все нужные страницы для робота. Но при поиске в гугле региона по sitename, получаю следующее:

sitename.com/
A description for this result is not available because of this site's robots.txt

Т.е. гугл еще видимо не обновил инфу о том, что робот изменился. Где-то прочитал, что роботс гугл обновляет крайне редко, и это может занять месяцы. Карту сайта уже вбил в делелопер тулс. Несколько внешних ссылок имеются. Но гугл пока увидел только из твиттера.

Помогите плз советом, что делать? ) Или все-таки 1 день это слишком мало?

emariaru
На сайте с 26.10.2010
Offline
73
#1

Конечно один день мало)) Ждите...

S
На сайте с 08.08.2007
Offline
39
#2
emariaru:
Конечно один день мало)) Ждите...

а сколько времени это обычно занимает?

DZ
На сайте с 31.07.2012
Offline
30
#3

seovaryag смотря сколько он у вас провисел в таком состоянии.

S
На сайте с 08.08.2007
Offline
39
#4
DiZSl:
seovaryag смотря сколько он у вас провисел в таком состоянии.

дней 10-15

O2
На сайте с 28.07.2012
Offline
7
#5

На мои сайты заходит раз в 2 дня, после этого обновляет от 2 до 7 дней. Это по моему опыту.

---------- Добавлено 26.08.2012 в 01:20 ----------

Заходит почитать роботс имелось в виду.

S
На сайте с 08.08.2007
Offline
39
#6

Rostok, да, контент добиваем. Но до опередленного предела. Так как это сервис.

Хотя в сабдоменах постоянно будет появлятся релевантный контент. А если над самим sitename.com практически не будет вестись работа, ну в малом объеме, а subdomain.sitename.com будут появлятся регулярно с уник контентом, то отразится ли это на sitename.com ? опять же с точки зрения гугла.

oracleh2, спаcибо. да, по тихоньку индексирует. правда только пару внутренних страниц с объемным контентом. главной нет. но того пугающего текста о роботс уже не в выдаче )

Robin_Bad
На сайте с 24.12.2007
Offline
85
#7

Так в Google Webmaster Tools чётко показывается, какая версия robots.txt в данный момент используется: https://www.google.com/webmasters/tools/robots-analysis?hl=ru&siteUrl=http://site.ru/ (если вдруг не видели этой страницы)

У меня обычно не больше суток проходит до его обновления.

S
На сайте с 08.08.2007
Offline
39
#8

всё обошлось. гугл проиндексировал всё что нужно. ) спасибо

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий