Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Не та страница в выдаче

1 23
cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#21
nik_kent:
Не тупите.

))) т.е. роботы индексируют ссылки со страниц запрещенных в роботсе?

Иван Чередов (http://ivan.cheredov.com/about/)
ME
На сайте с 11.07.2011
Offline
71
MixEg90
#22
cheredov:
Хе... так а что ТС не нравится то? ну и выходит /rental/costa_brava/?PAGEN_1=3
чем она хуже?

Позиции скачут.. и не только в каталоге Коста Брава такая ситуация

nik_kent
На сайте с 05.02.2008
Offline
178
nik_kent
#23
cheredov:
))) т.е. роботы индексируют ссылки со страниц запрещенных в роботсе?

Вы будете видимо удивлены, но роботы ПС посещают страницы, закрытые в роботсе, переходят по ссылкам, которые расположены на таких страницах, и если страницы, доступные по этим ссылкам сами не запрещены к индексации, то добавляют их в индекс.

С уважением, Николай.
регистрация в каталогах с Страничка "Наши клиенты" - Нужно ли закрыть от
cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#24
nik_kent:
Вы будете видимо удивлены, но роботы ПС посещают страницы, закрытые в роботсе, переходят по ссылкам, которые расположены на таких страницах, и если страницы, доступные по этим ссылкам сами не запрещены к индексации, то добавляют их в индекс.

Ну удивляться тут нечему, тем более я согласен, что директивы роботса всего лишь рекомендация. А насчет ссылок - надо бы проверить... 🍿

1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий