Проблема с robots.txt

L
На сайте с 18.10.2006
Offline
109
676

Есть ГС для сапы, домен дроп, раньше на нем в robots.txt была закрыта главная для индексации. Сейчас все вроде нормально, но в вебмастере пишут следующее:

Внимание! Главная страница сайта исключена из индекса: Документ запрещен в файле robots.txt .

При этом файл следующего вида:

User-agent: *
Disallow: /news
Host: *****.ru

По логам смотрю что робот уже несколько раз просматривал файлик, но нечего не меняется. В вебмастере так же дата последнего посещения меняется. Стоит ли ждать изменений, или лучше поставить временную заглушку и написать Платону?

MaverickC
На сайте с 17.01.2011
Offline
74
#1

в панели есть проверка robots.txt, посмотрите, что он загружает, и проверьте url на разрешение к индексации, если покажет все нормально, то просто ждите.

Вы пишите просматривал файлик-ответ сервер отдал 200? Возможно яндекс не может загрузить файл и отдается 404 например?

Так же можете проверить заголовки сервера для главной и robots.txt, например здесь http://www.bertal.ru/index.php?url=http%3A%2F%2Fsite.ru&ar=249918#h

Север
На сайте с 21.03.2008
Offline
142
#2

Lasta, у меня такая же ситуация и главную так же закрывал, был заброшенный сайтик, решил им заняться.

Написал Платонам, в ответ пришло:

"После ближайших обновлений, главная страница сайта будет возвращена в поиск. Пожалуйста, дождитесь обновлений."

Тех. [post=5767911]подержка Vbulletin √[/post] <-- Отзывы -/- Надежныe --> VDS √ (https://cp.inferno.name/cart.php?aff=2714)
0bevan
На сайте с 23.09.2008
Offline
239
#3

Lasta, сколько времени прошло, после размещения нового robots.txt?

Не знаешь как попасть в ТОП? Тебе сюда yandex.ru/admin (http://yandex.ru/admin) ( ͡° ͜ʖ ͡° )
L
На сайте с 18.10.2006
Offline
109
#4

Около недели.

KILLER666
На сайте с 22.01.2011
Offline
20
#5

MaverickC спс за сервис, удобно смотреть исходники

K
На сайте с 31.01.2001
Offline
737
#6
Lasta:
Около недели.

Это ничто для Яндекса, ожидайте.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий