Robots.txt как правильнее

N
На сайте с 28.08.2006
Offline
11
523

Вопрос, скрипт поиска search.php приавильней запрещать результаты поиска для попадания в индекс:

Disallow: search.php или Disallow: /search.php

Yaroslav_Adv
На сайте с 27.09.2005
Offline
199
#1

niffi, второй случай будет работать, первый - нет.

С уважением, Ярослав Деревягин Веб-агентство "Found (http://found-it.ru)"
N
На сайте с 28.08.2006
Offline
11
#2

Тоесть прописав в роботс.txt Disallow: /search.php

я могу исключить вероятность попадания в яку ссылки вида http://mai-domen.uu/search.php?www=true&query=%E7%E0%EF%F7%E0%F1%F2%E8&lr=countryBY

Правильно?

Piligrim
На сайте с 10.04.2005
Offline
145
#3

на всякий случай ссылочка: http://robotstxt.org.ru/

Директив (http://directiv.ru) - поисковый маркетинг Адвербо (http://adverbo.ru) - продвижение с ежедневными списаниями за топ или трафик
Yaroslav_Adv
На сайте с 27.09.2005
Offline
199
#4
niffi:
Правильно?

Правильно :) Подобная конструкция запрещает индексацию всех страниц, имена которых будут начинаться с /search.php. Можно сделать даже так:

Disallow: /search.php?

K
На сайте с 31.01.2001
Offline
737
#5
niffi:
я могу исключить вероятность попадания в яку ссылки вида http://mai-domen.uu/search.php?www=t...8&lr=countryBY

Правильно?

Более того, в противном случае сайту угрожает бан за попытку индексации результатов поиска.

P.S. И не надо использовать жаргонизм "яка", причем не к месту. Это совсем другое.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
N
На сайте с 28.08.2006
Offline
11
#6
Piligrim:
на всякий случай ссылочка: http://robotstxt.org.ru/

Спасибо за линк, читаю.

И вот тут не можем понять по тексту,

Disallow: /search.php?

Host: www.site.ru

не запрет ли это на индексацию всего сайта, или Host лучше в конце не ставить?

Каширин
На сайте с 03.01.2004
Offline
1018
#7
niffi:
Спасибо за линк, читаю.

И вот тут не можем понять по тексту,
Disallow: /search.php?
Host: www.site.ru

не запрет ли это на индексацию всего сайта, или Host лучше в конце не ставить?

Директива Host указывает роботу Яндекса на главное зеркало данного сайта. С директивой Disallow: никак не связано.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий