вопросы по robots.txt

infomix
На сайте с 03.11.2008
Offline
10
376

Есть вот какой вопрос, в корне сайта есть файл spam.php, он нужен чтобы обрабатывать запросы от статей и постов на отсылку модератору сообщений о спаме.

Анализ яндекса показывает что 22% всех страниц это файлы якобы раздела: "spam.php?"

сама страничка содержит форму заполнения жалобы на спам. то есть ничего существенного для поисковиков не представляет. то есть её можно было бы скрыть от поисковиков, чтобы она глаза не мозолила.

ссылки у меня создаются в формате http://www.имя.ru/spam.php?id=123

конечно, лучше было бы сделать их в формате http://www.имя.ru/spam/?id=715

и закрыть папку спам в роботсе,

но на данный момент такой возможности нету. попробовал закрыть их через:

Disallow: /spam.php?

вроде яндекс при проверке пишет что все гуд, файлы вида http://www.имя.ru/spam.php?id=123

http://www.имя.ru/spam.php?id=1234 http://www.имя.ru/spam.php?id=12345 запрещены к индексации.

Но как то меня все равно этот метод смущает...

вопрос собственно, зря я волнуюсь или нет? или представленного метода будет достаточно?

infomix добавил 10.08.2009 в 19:19

Ответьте что нить :)

elkini
На сайте с 03.07.2009
Offline
119
#1

зря волнуетесь

для успокоения проверьте подобные ссылки на наличие в индексе

stifler_x
На сайте с 19.06.2008
Offline
193
#2

Я в подобных задачах использую что-то типо Disallow: /spam.php*

K
На сайте с 31.01.2001
Offline
737
#3

А ведь совсем недавно звездочка одначала символ '*' и эта конструкция была неработоспособна:

stifler_x:
Disallow: /spam.php*

А сейчас, когда звездочка у всех основных поисковиков означает любую последовательность символов, она в конце строки просто нахрен не нужна :).

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий