Робот - это программа, при заходе которой никто не смотрит рекламу на Рамблере ;).
http://search.rambler.ru/robots.txt :
User-agent: *
Disallow: /
Это означает, что никакая программа не должна туда лазить, в том числе и ваша.
Поправка: автоматическая программа.
"курица && вертеле && гриле" - так гораздо лучше. Если не пользоваться оператором &&, то на длинных запросах ничего нужного не найдешь.
Там же все разжевано: сначала надо стереть страницу (чтобы выдавалось 404), только тогда можно попросить ее удалить из базы. Придется сначала похачить сервер конкурента ;).
Где-то Рамблер писал, что "в самом крайнем случае - 3 месяца" ждать.
Rev, этого сайта в базе яндекса нет. Если хотите - это путь в никуда.
Тут все не так однозначно. http://company.yandex.ru/pressa/2002/10-29_01.html - см. п.3.4
А что каким словом обозвать, надо смотреть в каждом конкретном случае.
Который подороже, конечно!
Какой вопрос, такой ответ.
А если серьезно, я бы выбирал из известных и крупных.
Если хорошо покопаться, можно найти про "геморрой" и microsoft.com, и еще про кое-что и кое-кого:
теперь алгоритмы более совершенны, их так не доведешь до абсурда но принципы те же. Ссылочное ранжирование - это сила.
Avatar, главное, как я понимаю, цель - достигнута и работа проделана не зря. Хорошо понимаю и разделяю чувство удовлетворения. Особенно если позиции окажутся стабильными.
