о роботс.тхт

V
На сайте с 13.01.2003
Offline
41
vga
660

Что-то не могу поняьт как запретить индексировать определенную cgi-шку с любыми парамсетрами...

прошлая попытка выкинула весь контент из cgi-bin из всех поисковиков, что не приемлимо.

---------------- Порталостроитель. новости (http://news.qs.kiev.ua/), каталог сайтов и поиск (http://search.qs.kiev.ua/), Мобильные телефоны (http://mobile.qs.kiev.ua/) Цифровая техника (http://digital.qs.kiev.ua/) CD/DVD диски (http://cd.qs.kiev.ua/) Прайс-листы магазинов Украины (http://wheretobuy.com.ua)
[Удален]
#1

vga, например так - в robots.txt написать:

User-agent: StackRambler

Disallow: /cgi-bin/redirect.cgi?

Это запрещает Рамблеру индексировать cgi-bin/redirect.cgi с любыми параметрами.

Sir[MAI]
На сайте с 22.10.2002
Offline
147
#2

Interitus, а если написать

Disallow: /cgi-bin/redirect.cgi

- то не запретит?!! 😕 🙅

С уважением, Сергей
[Удален]
#3

Запретит.

Sir[MAI]
На сайте с 22.10.2002
Offline
147
#4

Interitus, ок! Что-то я сегодня нервный - испугался... :)

LM
На сайте с 30.11.2001
Offline
71
LiM
#5

Sir[MAI], в Вашем варианте будет запрет не только на вызов с параметрами, но и на вызов без оных - это может быть важно. ;)

С уважением, Андрей Хроленок. Загляни в FAQ по оптимизации и продвижению сайтов (http://www.seoman.ru/FAQ/) Анализатор страниц сайтов (http://www.seoman.ru/analizer/)
Sir[MAI]
На сайте с 22.10.2002
Offline
147
#6

LiM, разумеется! :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий