Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robots.txt - сколько их?

Elbran
На сайте с 29.03.2009
Offline
78
Elbran
319

Очень часто при обмене ссылками, каталог со ссылками делаю на субдомене:

(ну не равноценный обмен, но не в этом дело)

www.SITE.ru - основной сайт

www.LINK.site.ru - каталог ссылок.

так вот правильно ли я понимаю, что:

1-е

основной файл robots.txt находится здесь:

www.SITE.ru/robots.txt (но может и отсутствовать)

и в нём можно запретить индексацию www.LINK.site.ru ?

2-е

Но может быть ещё один файл

www.LINK.site.ru/robots.txt

т.е. при проверки ссылки в www.LINK.site.ru я должен уточнять наличей 2-х файлов robots.txt ?

Домены по 95р (http://reg.ru-tbf.ru/), Сервис по проверке ссылок + генератор статей с уникальностью 95% (http://backlinksmanager.ru/) ICQ: 338-814-942
ВЖ
На сайте с 20.11.2007
Offline
91
Владислав Железный
#1

www.SITE.ru/robots.txt для домена www.SITE.ru, www.LINK.site.ru/robots.txt для домена www.LINK.site.ru

Итого один robots.txt для одного домена и не важно какого он уровня.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий