Как узнать зарубежный индекс? Или что это такое? :)
Кстати, не всегда достаточное условие. ;)
САЙТ.COM — зеркало.
www.сайт.com — зеркало.
сайт.com — быстроробот.
сайт.com — зарубежный индекс.
foxyrus, если речь про сайт из подписи, то код GA Вы поставили неверный.
https://www.google.com/support/googleanalytics/bin/answer.py?answer=55524&topic=7295
По релевантности с поправкой на Тиц. Тобишь сначала по Тиц ранжируется наиболее релевантная группа (искомые слова/часть слов из запроса встречаются в названии и описании), затем (опять же по Тиц) ранжируется менее релевантная (искомые слова/часть слов из запроса встречаются только в описании).
Это видно из результатов поиска. А вот было ли так всегда, я что-то затрудняюсь ответить. Может тестируют новый вариант ранжирования.
А вот не определится автоматом разрешение пользователя, что тогда? :)
И это тоже. И вообще, насильно навязывать пользователю то, что он не просил — опасно. ;)
Тоже верно.
+ возможность выбора/перехода к мобильной версии без автомата.
Конкретно под это — не стоит (в районе 2% пользователей: http://www.liveinternet.ru/stat/ru/resolutions.html).
А вот сделать версию для мобильных устройств — очень даже стоит. ;)
semenov, а, ну с этим всё ок. :)
Просто нужно помнить, что директивы в robots.txt не наследуются (согласно стандарту). Тобишь, запрет, объявленный для произвольных роботов, не является действующим для робота, которому объявлена персональная инструкция.
Да не совсем по «стандартам». Взять хотя бы директиву «Crawl-delay»:
И кроме неё есть ещё отклонения от «стандартов». ;) Например, Гугл «Crawl-delay» не поддерживает. Да, она игнорируется при обработке, но кто знает как поведёт себя робот в случае чего.
Я бы тоже не стал, поэтому мы с Вами не LuCkyManы. :) Но это уже другой вопрос.
Спасибо. ;) Не, на самом деле, robots.txt, оформленный таким образом, поставленную задачу выполняет (на грани правда, но всё же).