robots.txt

[Удален]
284

Здравствуйте, в индекс лезет туча страниц например

http://www.site.ru.ru/category/lego/offset140/

http://www.site.ru.ru/category/lego/offset30/

http://www.site.ru.ru/category/lego/offset90/

http://www.site.ru.ru/category/lego/offset50/

http://www.site.ru.ru/category/lego/offset70/

хотя нормальная ссылка выглядит вот так

http://www.site.ru.ru/category/lego/

Как закрыть все окончания offset по всем категориям, чтобы не перебирать их вручную.?

И второе тоже самое, только вначале добавляется слово shop то есть http://www.site.ru.ru/shop/category/lego/

А если я пропишу Disalow /shop он не грохнет весь сайт?

Azazelkin
На сайте с 13.06.2010
Offline
101
#1

Disallow: /*offset

Disallow: /shop*

подпезь

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий