wordpress и robot.txt

Andrey4ik
На сайте с 29.03.2011
Offline
40
538

нужно ли открывать для индексации *tags ?

вот мой робот:

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed
Disallow: /*?*
Disallow: /tag
Host: site
Sitemap: http://site/sitemap.xml.gz
Sitemap: http://site/sitemap.xml

извиняюсь, robots.txt

[Удален]
#1
Andrey4ik:
нужно ли открывать для индексации *tags ?

Не стоит, имхо

Andrey4ik
На сайте с 29.03.2011
Offline
40
#2

а почему тогда гугол в вебмастере тревогу бьет? что из-за того что у меня закрыты теги, он пишет:

Обнаружены серьезные ошибки, связанные с состоянием сайта
TaediumVitae
На сайте с 22.09.2011
Offline
41
#3

А у меня гугл даже закрытые в роботсе теги индексирует, и ничего.

Sasha Ivlev
На сайте с 16.08.2011
Offline
15
#4

привет. лично я закрыл, считаю что лучше не стоит.

на серче есть группа по вордпресс, в которой, я описал создание robots.txt почитай.

ну и само собой присоединяйся к группе, уверен, тебе есть что там написать.

wlad2
На сайте с 17.07.2008
Offline
153
#5
нужно ли открывать для индексации *tags ?

Если метки затачиваются под SEO и не используются как спам то можно открывать,

у меня на некоторых сайтах работает скрипт который открывает для индексации только-те метки в которых больше одной статьи.

Cuck
На сайте с 02.06.2011
Offline
110
#6
TaediumVitae:
А у меня гугл даже закрытые в роботсе теги индексирует, и ничего.

Значит не так закрыты.

Andrey4ik
На сайте с 29.03.2011
Offline
40
#7

как не так закрыты? как должно быть? поч гугол на меня бочку тогда катит?

TaediumVitae
На сайте с 22.09.2011
Offline
41
#8
Cuck:
Значит не так закрыты.

Вот так...

Disallow: /tag

...не так?

Andrey4ik
На сайте с 29.03.2011
Offline
40
#9

а резве у меня не так? :D

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий