Правильный ли robots.txt ?

K
На сайте с 24.02.2013
Offline
52
320

Добрый вечер, в своей старой теме задавал вопрос, но посоветовали спросить здесь. В общем есть 2 папки с картинками и одна с редиректами, их надо закрыть от поисковиков,папки pls ryts href . Страницы сайтов нужно что бы индексировались без проблем. С www.moysait.ru стоит 301 редирект на moysait.ru . Правильно ли составлен роботс? Ничего такого я не поставил что может мешать индексации? :

User-agent: *

Disallow: /pls

Disallow: /ryts

Disallow: /href

Host: moysait.ru

Sitemap: http://moysait.ru/sitemap.xml

Благодарю за информацию.

[Удален]
#1

Если на сайте нет полезных страниц, которые лежат в папках:

  • /pls/
  • /ryts/
  • /href/

то все заполнено корректно. То есть, роботы не будут индексировать только то, что лежит в этих папках.

Удобнее всего проверять за собой в сервисе: https://webmaster.yandex.ru/robots.xml

KB
На сайте с 06.06.2014
Offline
38
#2

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий