Вопрос про robots.txt

A7

161

acid777

3 ноября 2010, 12:23

393

Доброе!

Народ подскажите как правильно и корректно закрыть:

1. папку /page/ если адрес сайта вот такой - _site.ru/music/page/7/

2. все страницы вида _site.ru/print:page,1,57107-soulful-candy-tasteful-house-music-2010.html

ну тоесть страницы для печати.

370

kimberlit

3 ноября 2010, 12:29

#1

Disallow: /*/page/

Disallow: /printage

A7

161

acid777

3 ноября 2010, 14:32

#2

А такая

Disallow: /*/page/

точно будет правильно работать, просто первый раз вижу такую...

может еще кто то подтвердить?

69

Delarante

3 ноября 2010, 16:59

#3

acid777:
Disallow: /*/page/
точно будет правильно работать, просто первый раз вижу такую...
может еще кто то подтвердить?

будет работать...

ТС а вообще Яндекс не зря предлагает Анализ robots.txt - http://webmaster.yandex.ru/robots.xml

Заходим, вбиваем в вашем случае в первое поле:

site.ru

Во второе поле:

User-agent: *
Disallow: /*/page/

Нажимаем - Список URLдобавить

Вбиваем туда нужный урл для проверки, в вашем случае - site.ru/music/page/7/

И жмем - проверить.

Просто и достоверно...

Гугл подстраивает выдачу под Лидирующая биржа статей Рунета! Проверка индексации статей