Помогите осилить robots

12 3
K
На сайте с 18.11.2008
Offline
84
1373

Здравствуйте, вопрос такой.

Есть на сайте страницы, которые необходимо закрыть от индексации. Все они имеют один вид

page_[#].htm

Вместо "[#]" выступает случайная последовательность цифр. Правильно ли будет написать так

Disallow: page_*.htm

Cпасибо за помощь.

melkozaur
На сайте с 06.04.2010
Offline
536
#1

Можно так: Disallow: /page_

запретит индексировать все файлы и папки, которые начинаются с "page_"

K
На сайте с 18.11.2008
Offline
84
#2

логично, благодарю :)

K
На сайте с 18.11.2008
Offline
84
#3

И снова прошу помощи по роботс.

Есть сайт с адресами

http://site.com/1/

http://site.com/2/

Категории 1

http://site.com/cat/1/

http://site.com/cat/2/

являются дублями. Далее структура выглядит следующим образом:

http://site.com/cat/cat2/192/index.htm

Как запретить к индексации страницы вида "категории 1"? Как я понимаю, надо написать что-то вроде:

Dissalow: /cat/$1/

как-то так. Подскажите, как пишется правильно. Т.е. необходимо запретить только те страницы, в адресах которых после "cat" идет цифра.

Благодарю.

kimberlit
На сайте с 13.03.2007
Offline
370
#4
Knigorub:
Как запретить к индексации страницы вида "категории 1" ... Т.е. необходимо запретить только те страницы, в адресах которых после "cat" идет цифра.

Disallow: /cat/1

Disallow: /cat/2

Disallow: /cat/3

Disallow: /cat/4

Disallow: /cat/5

Disallow: /cat/6

Disallow: /cat/7

Disallow: /cat/8

Disallow: /cat/9

nikhotin
На сайте с 24.05.2007
Offline
74
#5

Disallow: /*1.html

Disallow: /*2.html

Disallow: /*3.html

Disallow: /*4.html

Disallow: /*5.html

Disallow: /*6.html

Disallow: /*7.html

Disallow: /*8.html

Disallow: /*9.html

Disallow: /*0.html

Disallow: /*/cat1*.html

Disallow: /*/cat2*.html

Disallow: /*/cat3*.html

Disallow: /*/cat4*.html

Disallow: /*/cat5*.html

Disallow: /*/cat6*.html

Disallow: /*/cat7*.html

Disallow: /*/cat8*.html

Disallow: /*/cat9*.html

Disallow: /*/cat0*.html

nikhotin добавил 18.02.2011 в 12:41

Вся инфа взята от сюда:

http://help.yandex.ru/webmaster/?id=996567

kimberlit:
Бред

А зачем вы понизили мне репу с сообщением "Бред"?

Аргументируйте.

Ничто не пугает нас страшнее всего,как одинокая маленькая девочка в белом платьице холодной осенней ночью на аллее рядом с кладбищем...
kimberlit
На сайте с 13.03.2007
Offline
370
#6
nikhotin:
Аргументируйте.

Ты для начала условия задачи почитал бы. Откуда, например, .html нарыл?

K
На сайте с 18.11.2008
Offline
84
#7

дело в том, что на сайте порядка 300 таких страниц. Роботс сильно разрастется. Способа а-ля переменная, как я понимаю, нет?

P.S. Хелпы читал, поиски тоже пользовать умею, на них указывать не надо.

nikhotin, то, что вы написали, действительно очень далеко от ТЗ, хотя, может, и я изъясняюсь невнятно.

kimberlit
На сайте с 13.03.2007
Offline
370
#8
Knigorub:
дело в том, что на сайте порядка 300 таких страниц. Роботс сильно разрастется. Способа а-ля переменная, как я понимаю, нет?

А у нас сколько цифр в природе существует? Зачем 300 писать?

Девять будет достаточно, если с нуля ничего не начинается. (пост№5)

Или я что-то не так понимаю?

K
На сайте с 18.11.2008
Offline
84
#9
kimberlit:
А у нас сколько цифр в природе существует? Зачем 300 писать?
Девять будет достаточно, если с нуля ничего не начинается. (пост№5)
Или я что-то не так понимаю?

Т.е. правило

Disallow: /cat/1

Disallow: /cat/2

Disallow: /cat/3

Disallow: /cat/4

Disallow: /cat/5

Disallow: /cat/6

Disallow: /cat/7

Disallow: /cat/8

Disallow: /cat/9

Будет также запрещать и

Disallow: /cat/10

Disallow: /cat/20

и т.д.?

kimberlit
На сайте с 13.03.2007
Offline
370
#10
Knigorub:
Будет также запрещать и

Disallow: /cat/10
Disallow: /cat/20

и т.д.?

Да..............

Disallow: /cat/1 закрывает все адреса, которые начинаются на /cat/1, т.е.

/cat/1

/cat/15656

/cat/163567357576

и т.д.

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий