И еще один вопрос про роботс.тхт

[Удален]
420

Понимаю, что вопросы про роботс. уже наверное достали, но тем не менее есть вопрос

Хочу запретить индексацию страниц такого вида (архивы)

http://site.ru/2011/

http://site.ru/2011/01/

Но в тоже время не запрещать индексацию страниц со статьями такого вида

http://site.ru/2011/01/statya/

Такой вариант будет корректным?

Dissalow: /2011$

Dissalow: /2011/*$

C
На сайте с 04.02.2005
Offline
291
#1

Allow /2011/01/statya

Dissallow /2011/01*

[Удален]
#2

Чуть уточню.

Дело в том что нет четких признаков вида "2011" или "statya" для того что бы сделать им "Allow: /2011/01/statya".

Нужно разрешить любой урл вида "/год/месяц/статья"

и запретить любой другой урл вида "/год/месяц/" или же только "/год/"

Так прокатит?

Dissallow /201*

Dissallow /201*/*

Allow /201*/*/*

C
На сайте с 04.02.2005
Offline
291
#3

Сначала разрешаете

Allow /201*/*/

Затем запрещаете

Dissallow /201*/*$

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий