Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt - загрывать ли tag?

NK
На сайте с 19.12.2010
Offline
32
nikola-kola
518

Нужно ли его закрывать? Как лучше для оптимизации будет?

ЗЫ на данный момент вот такой вот robots у меня:

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /wp-trackback

Disallow: /wp-feed

Disallow: /wp-comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Host: мой_сайт.ru

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /wp-trackback

Disallow: /wp-feed

Disallow: /wp-comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Sitemap: http://мой_сайт.ru/sitemap.xml

nikola-kola добавил 15.01.2011 в 18:04

Люди вы где? Как будто здесь нету SEOшников, которые в этом компетентны? Отзовитесь!

Regvps - VPS в России (http://regvps.ru/linux-vps/) и Европе. Виртуальный выделенный сервер от 250 р
Kedr777
На сайте с 06.12.2010
Offline
111
Kedr777
#1

Однозначно - да. Зачем Вам дубли.

Neo79
На сайте с 17.08.2007
Offline
135
Neo79
#2

nikola-kola, однозначно ДА, дубли прямой путь к АГС

Куплю сайты спортивной тематики (http://seo-sport.ru/form.php) Продаю базы url сайтов из ЯК, DMOZ, Mail (/ru/forum/586087) Размещения статей на старых СДЛ (/ru/forum/715803)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий