При чём sitemap и host(если зеркал нет) не обязательны они в панелях веб-мастера указываются, в вашем случае первый вариант предподчительней, т.к. правила одинаковые кроме сrawl-delay и host (google на них пофиг, но это не значит что ошибка).
+ Disallow: /administrator/ - такие вещи не стоит выкладывать в robots, т.к. он общедоступен, админку лучше переименовать.
Служебные страницы в robots.txt запретите (оригинал 10.1 посмотрите), sitemap можно на cron посадить (чтоб не париться, такая возможность есть), не помешает.
Ни чего у вас не упадёт от этого, если индексацию сайта в robots.txt не запретите в полном объёме? ;) Если и упадёт, то только из-за служебных страниц, если на них есть ссылки. Усё индивидуально, пациента ни кто не видит.:)
Disallow: /page
ставьте без слеша, так надежней, проверено. со слешем бывало пс иногда все-таки индексили дубли, а без слеша - обрубается наверняка
Может быть, не замечал. Если смотреть по справкам вебмастера Yandex'a и Google, то надо так ;):
Команды можно посмотреть здесь:
[ATTACH]130056[/ATTACH]
Вместо start в cron пишите restart. В cron помещать перезагрузку, как и написали выше, не лучший выход.
мне диз не понравился и так много всяких фичей не хватает
Дизайн вы можете какой угодно сделать, там html. Много всяких фичей, это не ответ.
Всего лишь 7 WMZ (одноразово), за хороший скрипт:
http://yourcommentit.ru/buy/
/ru/forum/198579
Сайт вашего грузоперевозчика совсем читать не умеем?
http://www.pecom.ru/ru/calc/api.php
User-agent: Yandex
Allow: /
ТС, этим правилом вы разрешили яндексу всё индексировать, при указании user-agent'а (в данном случае для яндекса) он является приоритетом.
Правильней будет так:
и так:
При чём sitemap и host(если зеркал нет) не обязательны они в панелях веб-мастера указываются, в вашем случае первый вариант предподчительней, т.к. правила одинаковые кроме сrawl-delay и host (google на них пофиг, но это не значит что ошибка).
+ Disallow: /administrator/ - такие вещи не стоит выкладывать в robots, т.к. он общедоступен, админку лучше переименовать.
http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml
https://support.google.com/webmasters/answer/156449?hl=ru
P.S. Вы картинки сюда загружаете /images/? При Disallow: /images/ они не будут индексироваться.
Никак, у cloudflare свой редактор DNS-записей. Мучайте регистратора, если сами не можете менять DNS-серверы.
Опции >>> Определение стилей.
Служебные страницы в robots.txt запретите (оригинал 10.1 посмотрите), sitemap можно на cron посадить (чтоб не париться, такая возможность есть), не помешает.
Ни чего у вас не упадёт от этого, если индексацию сайта в robots.txt не запретите в полном объёме? ;) Если и упадёт, то только из-за служебных страниц, если на них есть ссылки. Усё индивидуально, пациента ни кто не видит.:)
https://support.google.com/webmasters/answer/156184?hl=ru&ref_topic=8476
http://help.yandex.ru/webmaster/indexing-options/sitemap.xml