Вопрос по Robots.txt

135

Georgyi

7 апреля 2009, 16:57

332

Приветствую всех.

Есть вопрос. Извините за то, что не воспользовался поиском и не лез читать статьи по теме "robots.txt".

Просто срочно нужно. Я думаю, вам не составит труда ответить. Мне это очень поможет.

Вот проблемка:

На моем сайте нет "robots.txt".

Скажите, как правильно его составить?

Вот этот вариант подойдет?

User-agent: *
Disallow: /cgi-bin

Sitemap: http://mysite.ru/sitemap.xml
Host: mysite.ru

Заранее спасибо!

Georgyi добавил 07.04.2009 в 21:19

Я знаю, что мой вопрос звучит грубо. Но пожалуйста помогите кто-нибудь :)

SEO-блог без воды: ZenPR.ru (http://zenpr.ru) --> Гугл сам говорит тебе, где ставить ссылки (http://zenpr.ru/gugl-sam-govorit-tebe-gde-stavit-ssyl/) – ты только ставь

205

Цахес

7 апреля 2009, 17:38

#1

Georgyi:
Вот этот вариант подойдет?

Нет, не подойдёт.

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).

135

Georgyi

7 апреля 2009, 17:41

#2

Нет, не подойдёт.

Вас понял.

Действительно не подойдет. Все-таки мне нужно было поискать, прежде, чем лезть сюда с вопросами.

Robots.txt уже составил.

Извините за беспокойство!

205

Цахес

7 апреля 2009, 18:01

#3

Georgyi:
Robots.txt уже составил.

Имя файла должно быть в нижнем регистре. Файл должен называться robots.txt, а не Robots.txt или ROBOTS.TXT.