Кто говорит? 😮
http://www.dom-na-leto.ru/rental/costa_brava/
http://www.dom-na-leto.ru/rental/costa_brava/?PAGEN_1=3
Посмотрите сами!
Вы о чем? Это нужные страницы, их не нужно удалять, это не идентификаторы, это постраничная навигация, с помощью которой пользователи видят анонсы карточек продукции.
И таким образом показать большую фигу пользователям, которые уже не смогут посмотреть больше объектов и увидят только те, что располагаются на первой странице рубрики.
Страницы эти (вида /rental/costa_brava/?PAGEN_1=3) нафик не нужны в индексе, но таки нужны пользователям.
А что тут разбираться - из постраничной навигации.
ТС, "Disallow: /*?" поможет не вспоминать об этой проблеме больше.---------- Добавлено 30.05.2012 в 14:35 ----------
Это из области фантастики, никуда они не денутся и даже новые появляться будут.
Запрет индексации страницы в роботсе не запрещает роботу посещать страницу и переходить по ссылкам на ней.
Пожалуйста. Вместо hh.ru подставьте адрес нужного сайта.
P.S. Работает, если на сайте стоит счетчик LI, естественно.
Даже если и так, то причем тут его шаблонность?
Disallow: /*ELEMENT_ID=
Я может сейчас криво объясню, но попробую:
Заходит робот на страницу intpereezd.ru/office.html и видит там конструкцию вида <а href="sovet.html"> и понимает это как ссылку на страницу intpereezd.ru/office.html/sovet.html. Почему? Потому что ссылка относительная и в ней нет первого слеша, который обозначал бы роботу, что данную ссылку следует считать от корня. А если он увидел такую же конструкцию на странице intpereezd.ru/flat-mini.html, то в итоге определил бы это как ссылку на intpereezd.ru/flat-mini.html/sovet.html и т.д.
Повторю, что в той теме ситуация один в один, Вы 4-й пост прочитайте!
Дело не в формате, или ставьте абсолютные ссылки или относительные со слешем вначале. Такая ситуация просто не первый раз случается. Раньше встречал даже конструкции вида <а href="../../sovet.html"> - означает, что страница вложена в папку и подпапку.
Ну как же Вы смотрите? Один в один ситуация как в том топике, на который я ссылку дал:
Телепатов нет, показывайте сайт.
