Все зависит от создаваемой ботами нагрузки, если сервер справляется, то Crawl-delay не нужен
antina, Вам надо на них (на поисковики) сильно обидеться
http://webmaster.yandex.ru/addurl.xml "Сервер недоступен"
какбы благословляе
Я тоже так умею и цены у меня ниже 😂
Они неправильно делают, надо органическую выдачу еще сузить и снипеты еще удлинить, тогда справа объявлений больше влезать будет 😂
Отсидят - расскажут (;
Дак опера и спрашивает прямым текстом "Отправить страницу с вашего компьютера...?"
