Спасибо за ответы. Действительно в LiveInternet учитываются переходы только на те сайты, которые зарегистрированы в системе статистики LiveInternet, и только на те их страницы, на которых установлен код счетчика. 😎
Прийдется наверно самим писать скрипт для подсчета переходов
😒
т.е. добовляем такую запись в robots.txt сайта:
User-agent: *
Disallow: domen.site.ru
или у поддомена должен быть свой robots.txt?
Это точно никак не повлияет на основной домен?
Спасибо! Добавлено в закладки :)
Вот что нашла (может кому пригодится):
Twiceler is an experimental robot (http://www.cuill.com/robots.html)
Turnitin (ex SlySearch) robot for helping educational institutions prevent plagiarism (http://www.turnitin.com/robot/crawlerinfo.html)
CazoodleBot/CazoodleBot-0.1 (http://www.cazoodle.com/)
IRLbot IRL-crawler - Texas A&M University research project crawler (http://irl.cs.tamu.edu/)
gigabot (http://gigablast.com/)
psbot (http://www.picsearch.com/)
сведенья о данных ботах взяты из robots.txt одного из сайтов... Интерестно зачем ему надо было их прописывать? Неужели http://gigablast.com/ и http://www.picsearch.com/ настолько часто используются?
Вот-вот.... меня как раз это и интересует...
Значит все-таки лучше отдельные секции? А для каких ботов это лучше сделать?
Google, yandex, rambler, aport, yahoo, msn.... этого будет достаточно или стоит еще кого-то внести в список?
В продолжение этой темы возникли дополнительные вопросы...
Более подробно: на конкретном сайте есть деление информации по городам-директориям. Так же для всех данных городов существуют поддомены которые дублируют информацию соответствующих директорий.
Вопрос в том надо ли на каждом поддомене закрывать от индексации все директории-города или только ту что дублирует данный поддомен?
Это понятное дело робот Yahoo (поисковой системы Yahoo)... более подробно о нем можно почитать тут
А если есть внутренняя страница которая под однословный ВЧ запрос подходит больше чем главная, что лучше продвигать?
А если продвигать однословный СЧ запрос?
и, допустим, для яндекса продвигать главную по нему, а для гугла - внутреннюю?
Есть ли смысл?
А смысл создавать и поддерживать новый сайт(сетеллит) ради трех ссылок на основной?
Не легче ли купить эти ссылки на уже раскрученных сайтах?
Извините за наивный вопрос, а есть ли в данном случае какие-нибудь методы "обмануть" Яндекс;)?
Из Яндекса (http://help.yandex.ru/catalogue/?id=873431) написано:
