robots.txt + перменные

12
Л
На сайте с 08.08.2006
Offline
59
1202

Вопрос, довольно таки еллементарен, только ответа на него так и не нашел.

Жуют ли поисковили (а Яндекс тем более) запрещенные типа

Disallow: /index.php?a=forum

Disallow: /index.php?a=gesha&op=teg

И ещё сразу вопрос:

как забанить для одной переменной без значение

к примеру

Disallow: /index.php?с=

?

Спасибо:)

Segey
На сайте с 23.08.2005
Offline
404
#1

Леха,

Яндекс этого не понимает, гугль понимает.

Brexit - уже совсем рядом. (https://about-this-model.blogspot.com/2019/03/brexit.html)
Л
На сайте с 08.08.2006
Offline
59
#2

Мда ... и есть в мета тегах прописать?

mediatime
На сайте с 14.12.2004
Offline
39
#3

<meta name="ROBOTS" content="NONE" />

Меньше скажешь, раньше выйдешь
K. Ermakov
На сайте с 10.12.2004
Offline
328
#4
Segey:
Яндекс этого не понимает

Что именно не понимает?

mediatime:
<meta name="ROBOTS" content="NONE" />

Простите, это чудо что делает с роботами?

С уважением, Константин Ермаков, absite.ru: онлайн кроссворды (http://absite.ru/); searchsuggest.ru: поисковые подсказки доставляют (http://searchsuggest.ru/).
mediatime
На сайте с 14.12.2004
Offline
39
#5
K. Ermakov:
Простите, это чудо что делает с роботами?

Это был вопрос на засыпку ? Или пост выше не видите ?

Он их Нах посылает !

romanov
На сайте с 13.01.2005
Offline
145
#6

content="noindex,nofollow" - а что есть content="NONE" просветите 😂

Читаем и сильно думаем (особенно внизу):

http://www.robotstxt.org/wc/meta-user.html

зарабатываейте с нами (http://www.seowizard.ru/r.54b8561c00.php)
K. Ermakov
На сайте с 10.12.2004
Offline
328
#7
mediatime:
Это был вопрос на засыпку ? Или пост выше не видите ?
Он их Нах посылает !

А, ну раз так, то нет вопросов, пусть посылает.

Для запрета индексации и перехода по ссылкам советую всё же использовать несколько иную конструкцию:

<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">

mediatime
На сайте с 14.12.2004
Offline
39
#8

все прекрасно работает ... в древних времен

NOINDEX, NOFOLLOW = NONE

Если вы уж про это незнали я молчу .... Какие из вас профи.

А вы знаете что index,follow = all ?????

хттп://www.technoterra.ru/ - посмотрите страницу для печати ....

И ненадо просто так минусы лепить .....

Л
На сайте с 08.08.2006
Offline
59
#9

всем спасибо за ответы!

можна тему закрывать =)

AVV
На сайте с 31.07.2006
Offline
84
AVV
#10
Segey:
Леха,
Яндекс этого не понимает, гугль понимает.

Закрывать тему рановато.

А с чего вы взяли, что Яндекс не понимает запрет в роботс.тхт динамических url типа index.php?action=print

Вот примеры здесь:

/ru/news/144

Леха:

И ещё сразу вопрос:
как забанить для одной переменной без значение
к примеру
Disallow: /index.php?с=

Если переменная в get-запросе находится сразу после знака ? - то так и "забанить"

Disallow: /index.php?с=

Disallow: /?с=

если после разделителя & - то ничего не получится.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий