Некоторые важные страницы блокируются в файле robots.txt

Wnet1992
На сайте с 14.01.2013
Offline
101
722

хотел бы спросить у Вас только добавил сайт в вебмастер гугл и вот такое вот пишет

Роботс мой вот

User-agent: *

Disallow: /register.html

Disallow: /login.html

Disallow: /note.html

Disallow: /payment/

Host: сайт.ру

Подскажите, что это такое?

---------- Добавлено 26.12.2014 в 03:03 ----------

с яндексом тоже самое я вот думаю может быть и за того, что сайт был долгое время заблокирован в роботсе и шас он пока не обновился? Тут поможет только время?

Wnet1992
На сайте с 14.01.2013
Offline
101
#1

Подскажите пожалуйста

KT
На сайте с 23.12.2014
Offline
20
#2

Кажется, по ссылке в гугл вебмастере по этой ссылке можно посмотреть подробности.

Disallow: /register.html
Disallow: /login.html
Disallow: /note.html
Disallow: /payment/

Если среди этих страниц нет важных, то все хорошо. Если какая-то должна индексироваться, то уберите строку с ней.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий