Форум Сайтостроение Веб-строительство

робот.txt

R1
На сайте с 15.02.2009
Offline
45
rabota1003
349 


User-agent: Yandex

Allow: /

Sitemap: http://sait.ru/sitemap.xml



User-agent: StackRambler

Allow: /

Crawl-delay: 7

данный код показывает карту сайта для яши и ограничение индекса страниц 7 сек для Рамблера а как сделать чтобы обе эти команды воспринимали все роботы

пс знаю вопрос нубский :o

[Удален]
#1

User-Agent:*

Analitic82
На сайте с 17.01.2009
Offline
70
Analitic82
#2

User-agent: *

Allow: /

Crawl-delay: 7

R1
На сайте с 15.02.2009
Offline
45
rabota1003
#3 

User-agent: *

Allow: /

Sitemap: http://sait.ru/sitemap.xml



User-agent: *

Allow: /

Crawl-delay: 7

вот так я правильно понял? 🙄

Analitic82
На сайте с 17.01.2009
Offline
70
Analitic82
#4

2 раза не обязательно :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий