Обратите внимание, URL-кодированные данные в рефере с Яндекса в нижнем регистре и нет переменной с указанием региона
Постоянно его в логах вижу, если это хитробот, то чото не сильно маскируется
Правильно
:D
По всей Руси орут на пляжах
Выложте фото сюда
> Иными словами, пророк указал, что как только 2/3 людей отвернется от бога – всем крышка
Что-то я не наблюдаю и 1/3 повернувшихся
User-agent: *
Allow: /$
Allow: /*.html$
Disallow: /
Начните с SEO
Google кладет на robots.txt, 404, метатеги, редиректы и отсутствие ссылок, упорно отображая страницы в списке проиндексированных, а удаление через вебмастер всего лишь скрывает страницы на 90 дней, продолжая хранить их в индексе
А для проиндексированых robots.txt он еще и тайтлы придумывает: http://www.google.ru/search?q=inurl:%22com/robots.txt%22
В идеале пользователи не должны вообще с Яндекса никуда уходить
А какие он должен вам выдавать?
