Robots.txt

S
На сайте с 05.05.2011
Offline
14
602

Что-то долдго Яндекс мой сайт индексирует, думаю, что дело в Robots.txt.

Кто может, скажите, всё ли так?

User-agent: *

Disallow: /out/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */trackback
Disallow: */feed
Disallow: */comments

User-agent: Yandex
Disallow: /out/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: www.site.ru

Sitemap: http://site.ru/sitemap.xml
Советы по созданию и продвижению сайтов в сети (http://dnseo.ru/)
ВУ
На сайте с 15.04.2011
Offline
10
#1
shaddad:
Что-то долдго Яндекс мой сайт индексирует

В последнее время скорость индексации от Роботса мало зависит.

Тем более что в нем у Вас в основном запреты прописаны.

Визуально вроде нормальный файл. Проверить как он работает можно в самом Я.ВМ.

Я бы не стал для Яндекса повторять общие правила.

H8
На сайте с 09.03.2011
Offline
96
#2

robots.txt вроде нормальный. У меня например 1 сайт тоже очень долго добавлялся в индекса яндекса, в то время как в гугл очень быстро попал.

Копирайтинг, рерайтинг, ежедневное наполнение сайтов (/ru/forum/965609)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий