ну это жесть тогда будет - при такой выдаче :)
я ржу по нескольким тематикам
МАААААААААААААААГГГГГГГГГГГААААААААААААААДДДДДДДДДАААААААААААН!
ура - вылазит полная ж.. :)
PPM, не, нету :) скрины делать нужно успевать
ИМХО and ЗАКОН - вещи все-таки несовместимые ;)
И где они были использованы?
вообще это не то чтобы прикольно. Маркета по идее не должно быть в поиске, он и так есть на странице... Как-то не хорошо Яндекс поступает :)
bystrobot, поиск рулит
http://www.le0n.ru/ballon/personal.html первый же результат.
а где вопрос?
делайте страницу для людей, чтобы в них зверя не будить
где? :)
в первом посте привел 2 примера, конкретно для 3х поисковиков, и конкретно для всех.
если такое содержание роботса - то это открытие для всех,
я ведь не про
User-agent: *
Disallow:
User-agent: Yandex
Host: www.ИМЯ САЙТА.ru
Ну кто не хочет прописывать хост - пусть не прописывает , пусть даже только яндекс понимает его - хуже не будет
можно так, а можно изменить содержание на
и добавить ресурс или внешние ссылки проставить на сайт
PIN_KOD, http://robotstxt.org.ru/ пинаю туда ;)
а сам файл будет такого содержания
Disallow: /
User-agent: Googlebot
User-agent: StackRambler
А если ВСЕМ поисковикам запрет, то
