robot.txt

123
[Удален]
#11

если вы хотите для гугла запретить то, так и пишите User-agent: Google а если * то это вроде как для всех поисковых систем

siv1987
На сайте с 02.04.2009
Offline
427
#12
liliaest:
но после аудита сайта мне написали, что в нем неверные команды.

После какого аудита?

liliaest:
Sitemap:

Sitemap нужно указать только для xml карты сайта.

altezzik
На сайте с 06.11.2011
Offline
247
#13
xegen:
если вы хотите для гугла запретить то, так и пишите User-agent: Google а если * то это вроде как для всех поисковых систем

Так и было задумано.

E
На сайте с 21.09.2009
Offline
283
#14

liliaest, в вебмастере яндекса инструмент проверки роботс используйте.

L
На сайте с 10.05.2013
Offline
0
#15
xegen:
если вы хотите для гугла запретить то, так и пишите User-agent: Google а если * то это вроде как для всех поисковых систем

Не сильна в составлении файла роботс и команды как прописываются правильно не знаю. Скопировала, как рекомендованый файл для сайтов на вордпрессе, немного подредактировала и вставила на сайт.

---------- Добавлено 11.05.2013 в 23:24 ----------

siv1987:
После какого аудита?

Аудит сайта заказывала для выявления ошибок сайта, из-за чего он не получает прибыли.

siv1987:
Sitemap нужно указать только для xml карты сайта.

Пока не представляю как это сделать, если честно...

Мне и в аудите написали:

Требуется сформировать карту и указать в директиве sitemap.xml.

Карта формируется и так. Что ещё нужно, пока не разобралась...

siv1987
На сайте с 02.04.2009
Offline
427
#16
liliaest:
Аудит сайта заказывала

Не знаю что они вам сказали, и какие команды им не нравиться, но синтаксически ваш роботс правильный, и все директивы прописаны верно.

liliaest:
Требуется сформировать карту и указать в директиве sitemap.xml

xml - это в формате xml. Вы указали ссылку на html карту сайта.

Поищите плагины "xml sitemap wordpress", под WP их должно быть куча.

ПС.

Лучше всего удалите начальные пробелы перед Diasallow:

L
На сайте с 10.05.2013
Offline
0
#17
siv1987:


xml - это в формате xml. Вы указали ссылку на html карту сайта.
Поищите плагины "xml sitemap wordpress", под WP их должно быть куча.

Сейчас у меня стоит Dagon Design Sitemap Generator v3.17

Значит его снести и закачать xml sitemap?

S1
На сайте с 08.05.2013
Offline
27
#18

Хорошая программка для составления файла sitemap - SiteMap Generator.

Выходной файл кидаете в корень на хостинге и прописываете к нему путь в роботс.

Получится примерно так: Sitemap: www.mali-business.ru/Sitemap.xml

L
На сайте с 10.05.2013
Offline
0
#19
siv1987:

Лучше всего удалите начальные пробелы перед Diasallow:

Пробелы убрала. Заменила также

Host: www.mali-business.ru

на

Host: http.mali-business.ru

Как рекомендовалось в аудите

S1
На сайте с 08.05.2013
Offline
27
#20
liliaest:
Host: http.mali-business.ru

Можно просто Host: mali-business.ru

Также, сделать на сервере 301 редирект (ищите файл htaccess и все что с ним связано) на домен без www. И в вебмастере яндекса указать основное зеркало без www.

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий