вопрос по robots.txt

[Удален]
321

Доброго дня)

В вебмастере вижу, ято Яндекс не правильно индексирует сайт(

Он копирует страницу http://www.mysite.ru/itisnews.php?skip=5 (и ей подобные)

Как мне прописать в робот.ткст запрет на индексацию страниц вида /itisnews.php?skip=* (т.е. тех страниц где $skip идет первой переменной).. но при этом запрет на страницы вида http://www.mysite.ru/itis.php?per=4&ou=main&skip=5 не должны распространятся ...

Или не страншно, что Яндекс индексирует этот мусор? Его он идексирует быстрее, чем нормальные страницы(

Light Phantom
На сайте с 17.03.2007
Offline
188
#1

User-agent: *

Disallow: /itisnews.php?skip=*

PS: хорошая фраза по первой ссылке:

Вернуться в раздел заогородной или городской недвижимости.
:D
Skie
На сайте с 14.10.2006
Offline
161
#2

Наверное так

User-agent: Yandex

Disallow: /itisnews.php?skip=

Остальные поисковики звездочку могут не понять

[Удален]
#3

Light Phantom,

Light Phantom:
хорошая фраза по первой ссылке:

спасибо, за подсказку)) исправил, очепятка

be_happy добавил 06.04.2008 в 18:25

Skie,

Skie:
User-agent: Yandex
Disallow: /itisnews.php?skip=

спасибо, работает)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий