Неверно. Директива Host должна быть только одна, потому как возможно только одно главное зеркало. Я из вопроса не понял, что Вы хотите сделать: указать Яндексу главное зеркало или запретить индексацию второго домена. Если нужно именно запретить, то в том же документе Яндекса, на которы вы привели ссылку, один способ решения проблемы описан:
Если у вас сервер Apache, то можно вместо использования директивы Host задать robots.txt с использованием директив SSI:
В этом файле роботу запрещен обход всех хостов, кроме
www.главное_имя.ru. Как включать SSI, можно прочесть в документации по вашему серверу или обратиться к вашему системному администратору. Проверить результат можно, просто запросив страницы:
а яндекс все свои поддомены тоже как один считает, например народ
Нет, поддомены на бесплатных хостингах не склеиваются.
и как тогда робот их успевает проходить...
Поддомены склеиваются только в результатах поиска, роботом они обходятся как отдельные сайты, т.е. ограничение на количество индексируемых страниц за один визит робота распространяется на каждый отдельный поддомен.
Нет, на которые 200 отдают 500 страниц лимит... раньше был, сейчас не понятно что-то, и большее количество стал забирать.
Неверно. Директива Host должна быть только одна, потому как возможно только одно главное зеркало. Я из вопроса не понял, что Вы хотите сделать: указать Яндексу главное зеркало или запретить индексацию второго домена. Если нужно именно запретить, то в том же документе Яндекса, на которы вы привели ссылку, один способ решения проблемы описан:
<!--#if expr=" \"${HTTP_HOST}\" != \"www.главное_имя.ru\" " -->
User-Agent: *
Disallow: /
<!--#endif -->
В этом файле роботу запрещен обход всех хостов, кроме
www.главное_имя.ru.
Как включать SSI, можно прочесть в документации по вашему серверу или обратиться к вашему системному администратору. Проверить результат можно, просто запросив страницы:
http://www.главное_имя.ru/robots.txt
http://www.другое_имя.ru/robots.txt
и т.д. Результаты должны быть разные.
А если хотите указать главное зеркало, то просто укажите его:
User-Agent: *
...
Host: www.domen1.ru
А для доменов третьего уровня отдельный robots.txt писать нужно.
Да.
МТС в регионах точно работает, да и вроде говорили, что все операторы должны поддерживать.
Не только. Рамблеру узнать о новых страницах помогает счетчик Top100, Гуглу - его бар.
Поздравляю! 🍻
Поздравляю!
Ну да, наверное. Но бывает.
Апорт? Не замечал. Пример можно?
Нет, поддомены на бесплатных хостингах не склеиваются.
Поддомены склеиваются только в результатах поиска, роботом они обходятся как отдельные сайты, т.е. ограничение на количество индексируемых страниц за один визит робота распространяется на каждый отдельный поддомен.
Не только. Рамблер в отдельных случаях тоже склеивает поддомены в выдаче, пример есть.