Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Вопрос по robots.txt

V
На сайте с 18.06.2008
Offline
30
vasinet
393

Подскажите пожалуйста, как закрыть в роботс кирилические ссылки типа--

http://site.com/категория-страница-4883.html

то есть все страницы http://site.com/категория-страница-X ???

Tryerty
На сайте с 04.12.2007
Offline
68
Tryerty
#1 

User-agent: Yandex
Disallow: /%D0%BA%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F-%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0-*

Подробнее.

Движение вверх нельзя воспринимать как движение вперед не только с точки зрения физики. Достаточно взглянуть, ЧТО плавает на поверхности...
V
На сайте с 18.06.2008
Offline
30
vasinet
#2
Tryerty:
User-agent: Yandex

Disallow: /%D0%BA%D0%B0%D1%82%D0%B5%D0%B3%D0%BE%D1%80%D0%B8%D1%8F-%D1%81%D1%82%D1%80%D0%B0%D0%BD%D0%B8%D1%86%D0%B0-*

Подробнее.

ок- я должен в ЮТФ написать страницу, а чтобы сделать маску - /UTFкирилица- X

я дожен поставить звездочку? /%D0%BA%D0%B0%D1%82%D-*

все ли верно понял?

K
На сайте с 31.01.2001
Offline
737
Kost
#3

Звездочка на конце подразумевается и так, писать ее не нужно.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
V
На сайте с 18.06.2008
Offline
30
vasinet
#4
Kost:
Звездочка на конце подразумевается и так, писать ее не нужно.

месяц назад делал без звездочки- в гугле страницы только увеличивались.

Сейчас сделал со звездочкой- посмотрим.

э, эти правила и на гугл распространяются, ведь так?

K
На сайте с 31.01.2001
Offline
737
Kost
#5
vasinet:
месяц назад делал без звездочки- в гугле страницы только увеличивались.
Сейчас сделал со звездочкой- посмотрим.

Некоторые вещи не нужно проверять экспериментально. Достаточно посмотреть в таблицу умножения, чтобы убедиться еще раз, что 2x2=4.

Кстати, для таких как вы тут висит FAQ с полезными ссылками.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий