Файл robots.txt

1 234
kimberlit
На сайте с 13.03.2007
Offline
370
#21

cleverbird, со слешем папки, без слеша файлы и папки ... Думай сам ...

Цахес
На сайте с 15.03.2007
Offline
205
#22
cleverbird:
Посмотрите, пожалуйста, правильно ли

В соответствии со стандартом перед каждой директивой "User-agent" рекомендуется вставлять пустой перевод строки. У вас же это не сделано.

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).
cleverbird
На сайте с 17.03.2008
Offline
41
#23
Цахес:
В соответствии со стандартом перед каждой директивой "User-agent" рекомендуется вставлять пустой перевод строки. У вас же это не сделано.

А у меня разве не так?

осторожно, работает мозг
Цахес
На сайте с 15.03.2007
Offline
205
#24
cleverbird:
А у меня разве не так?

Не знаю. В вышеприведенном примере всё написано одним блоком.

cleverbird
На сайте с 17.03.2008
Offline
41
#25

А как сделать этот перевод?

kimberlit
На сайте с 13.03.2007
Offline
370
#26

Пипец ... Вот так ...

cleverbird:
User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Host: site.ru
Sitemap: Http://site.ru/sitemap.xml

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Цахес
На сайте с 15.03.2007
Offline
205
#27
cleverbird:
А как сделать этот перевод?

Установить курсор в конце строки "Sitemap: Http://site.ru/sitemap.xml" и-и-и-и....

...нажать "Enter"!

P.S. Что такое "Enter" и где его искать объяснять?

cleverbird
На сайте с 17.03.2008
Offline
41
#28
Цахес:
Установить курсор в конце строки "Sitemap: Http://site.ru/sitemap.xml" и-и-и-и....
...нажать "Enter"!

P.S. Что такое "Enter" и где его искать объяснять?

А с чего Вы определили, что у меня не так? Я именно так и делал.

kimberlit
На сайте с 13.03.2007
Offline
370
#29

Равшан, это ты?

Цахес
На сайте с 15.03.2007
Offline
205
#30
cleverbird:
А с чего Вы определили, что у меня не так?

Ок. Для тех, кто на бронепоезде: "В вышеприведенном примере всё написано одним блоком".

"Кольцевая"- подумал Штирлиц. :)

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий