Форум Поисковые системы Яндекс

robots.txt User-agent: Yandex+*

akksimo
На сайте с 06.01.2011
Offline
117
akksimo
1430

Если в роботс прописано сначала для яндекс потом для всех остальных - то нужно ли в категориях для яндекс дублировать то что в остальных или он сам прочитает User-agent: *

User-agent: Yandex

Disallow: /*1

Disallow: /*2

Disallow: /*3

Disallow: /*foryandex1

Disallow: /*foryandex2

Disallow: /*foryandex3

Sitemap: http://www.site.net/sitemap.xml

User-agent: *

Disallow: /*1

Disallow: /*2

Disallow: /*3

Sitemap: http://www.site.net/sitemap.xml

ИЛИ же достаточно

User-agent: Yandex

Disallow: /*foryandex1

Disallow: /*foryandex2

Disallow: /*foryandex3

User-agent: *

Disallow: /*1

Disallow: /*2

Disallow: /*3

Sitemap: http://www.site.net/sitemap.xml

Delarante
На сайте с 13.07.2008
Offline
69
Delarante
#1
akksimo:
нужно ли в категориях для яндекс дублировать то что в остальных или он сам прочитает User-agent: *

Да, нужно...

S
На сайте с 28.10.2005
Offline
319
semenov
#2 


User-agent: Yandex

Disallow: /*1

Disallow: /*2

Disallow: /*3

Disallow: /*foryandex1

Disallow: /*foryandex2

Disallow: /*foryandex3



User-agent: *

Disallow: /*1

Disallow: /*2

Disallow: /*3



Sitemap: http://www.site.net/sitemap.xml
igrinov
На сайте с 09.01.2009
Offline
134
igrinov
#3

akksimo, для яндекса еще Host можете прописать

Персональный VPN/Socks сервер (https://cp.inferno.name/aff.php?aff=2419)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий