Правильно прописать запрет в robots.txt

123
Ф
На сайте с 05.03.2011
Offline
32
#11
kimberlit:
Ну, найди разницу в этих адресах. Она есть? Есть. Запятая после page. Добавь запятую в правило. Элементарно же всё.

Я понимаю что для вас это элементарно, поэтому я и пришел на серч :)

Я боюсь сделать не правильно и угробить сайт, прошу чтобы знатоки помогли

И
На сайте с 17.08.2014
Offline
2
#12
Фанатик:
Я понимаю что для вас это элементарно, поэтому я и пришел на серч :)
Я боюсь сделать не правильно и угробить сайт, прошу чтобы знатоки помогли

Ну так Вам же выше написали ответ.

Как я понял, это будет выглядеть так:

Disallow: /page,*

Если не правильно понял, kimberlit поправит.

kimberlit
На сайте с 13.03.2007
Offline
370
#13
Фанатик:
Я понимаю что для вас это элементарно, поэтому я и пришел на серч
Я боюсь сделать не правильно и угробить сайт, прошу чтобы знатоки помогли

Берёшь url.

site.ru/page,1,1,123-news_name.html

Выделяешь уникальный кусок, чтобы отсечь url, которые не нужно закрывать.

site.ru/page,1,1,123-news_name.html

Получаешь правило.

Disallow: /page,

Всё.

Илька, звёздочка не нужна.

Ф
На сайте с 05.03.2011
Offline
32
#14
kimberlit:
Берёшь url.
site.ru/page,1,1,123-news_name.html
Выделяешь уникальный кусок, чтобы отсечь url, которые не нужно закрывать.
site.ru/page,1,1,123-news_name.html
Получаешь правило.
Disallow: /page,
Всё.

Илька, звёздочка не нужна.

А дальше точно ничего не нужно писать? Не "$" "*" или что-то другое?

kimberlit
На сайте с 13.03.2007
Offline
370
#15
Фанатик:
А дальше точно ничего не нужно писать? Не "$" "*" или что-то другое?

Зачем? Почитай об этих символах в хэлпе и всё станет ясно. Тут нет никакой высшей математики. Весь синтаксис роботса строится на уровне третьего класса общеобразовательной школы. Но многие к нему относятся как ... Хотя может просто стоит почитать о нём хоть раз и вникнуть.

Ф
На сайте с 05.03.2011
Offline
32
#16
kimberlit:
Зачем? Почитай об этих символах в хэлпе и всё станет ясно. Тут нет никакой высшей математики. Весь синтаксис роботса строится на уровне третьего класса общеобразовательной школы. Но многие к нему относятся как ... Хотя может просто стоит почитать о нём хоть раз и вникнуть.

Все проверил через seobook analyzer, все работает вы верно сказали, спасибо большое.

А этот Илья посоветовал неправильно, я так бы заблокировал себе все page страницы.

И
На сайте с 17.08.2014
Offline
2
#17
Фанатик:
Все проверил через seobook analyzer, все работает вы верно сказали, спасибо большое.
А этот Илья посоветовал неправильно, я так бы заблокировал себе все page страницы.

Во-первых, не этот. Во-вторых, ничего Вы себе бы не заблокировали. Просто тут как хотите, можете со звездочкой, можете и без, суть сильно не меняется.

Ф
На сайте с 05.03.2011
Offline
32
#18
Илька:
Во-первых, не этот. Во-вторых, ничего Вы себе бы не заблокировали. Просто тут как хотите, можете со звездочкой, можете и без, суть сильно не меняется.

Зайдите и проверьте через seobook analyzer, меняется 🍿

---------- Добавлено 18.08.2014 в 20:18 ----------

Яндекс Вебмастер мне пишет:

Возможно, был использован недопустимый символ

Disallow: /page,

_______________________________________________

Что теперь делать?

kimberlit
На сайте с 13.03.2007
Offline
370
#19
Фанатик:
Яндекс Вебмастер мне пишет:

Возможно, был использован недопустимый символ
Disallow: /page,
_______________________________________________

Что теперь делать?

Просто запятая в url - это извращение.

Ф
На сайте с 05.03.2011
Offline
32
#20
kimberlit:
Просто запятая в url - это извращение.

Я понимаю, ну так настроен dle. Теперь нужно как-то по другому прописать, так Яндекс не принимает. Есть какие нибудь другие методы реализации? Если ставить * то это можно понимать как скобку как раз /page/1 и выходит(

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий