WebAlt

WebAlt
Рейтинг
275
Регистрация
02.12.2007
Concurent:
Disallow: /page

ставьте без слеша, так надежней, проверено. со слешем бывало пс иногда все-таки индексили дубли, а без слеша - обрубается наверняка

Может быть, не замечал. Если смотреть по справкам вебмастера Yandex'a и Google, то надо так ;):

User-agent: Yandex

Disallow: /page

User-Agent: Googlebot
Disallow: /page/

Команды можно посмотреть здесь:

[ATTACH]130056[/ATTACH]

Вместо start в cron пишите restart. В cron помещать перезагрузку, как и написали выше, не лучший выход.

png mysql.png
vvputin:
мне диз не понравился и так много всяких фичей не хватает

Дизайн вы можете какой угодно сделать, там html. Много всяких фичей, это не ответ.

Всего лишь 7 WMZ (одноразово), за хороший скрипт:

http://yourcommentit.ru/buy/

/ru/forum/198579

Сайт вашего грузоперевозчика совсем читать не умеем?

http://www.pecom.ru/ru/calc/api.php

User-agent: *

Disallow: /page/

User-agent: Yandex

Allow: /

ТС, этим правилом вы разрешили яндексу всё индексировать, при указании user-agent'а (в данном случае для яндекса) он является приоритетом.

Правильней будет так:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Crawl-delay:
Host:
Sitemap:

и так:

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Crawl-delay:
Host:
Sitemap:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Sitemap:

При чём sitemap и host(если зеркал нет) не обязательны они в панелях веб-мастера указываются, в вашем случае первый вариант предподчительней, т.к. правила одинаковые кроме сrawl-delay и host (google на них пофиг, но это не значит что ошибка).

+ Disallow: /administrator/ - такие вещи не стоит выкладывать в robots, т.к. он общедоступен, админку лучше переименовать.

http://help.yandex.ru/webmaster/controlling-robot/robots-txt.xml

https://support.google.com/webmasters/answer/156449?hl=ru

P.S. Вы картинки сюда загружаете /images/? При Disallow: /images/ они не будут индексироваться.

Никак, у cloudflare свой редактор DNS-записей. Мучайте регистратора, если сами не можете менять DNS-серверы.

Опции >>> Определение стилей.

Служебные страницы в robots.txt запретите (оригинал 10.1 посмотрите), sitemap можно на cron посадить (чтоб не париться, такая возможность есть), не помешает.

Ни чего у вас не упадёт от этого, если индексацию сайта в robots.txt не запретите в полном объёме? ;) Если и упадёт, то только из-за служебных страниц, если на них есть ссылки. Усё индивидуально, пациента ни кто не видит.:)

https://support.google.com/webmasters/answer/156184?hl=ru&ref_topic=8476

http://help.yandex.ru/webmaster/indexing-options/sitemap.xml

Всего: 2104