Как прочитать robots.txt

12
Н
На сайте с 15.03.2005
Offline
11
#11

Не стал писать его, но метатеги для роботов стоит ли оставлять (в них написано, что можно индексирвоать все)?

Йога, мантра-медитация (http://bhakty-yoga.narod.ru/)
S
На сайте с 15.02.2005
Offline
13
#12

Нет не стоит, он и так всё проиндексирует !

Не ошибается тот, кто ничего не делает !
B
На сайте с 07.10.2004
Offline
114
#13

Начинающий, robots.txt ускоряет индексацию в том смысле, что не индексируется то, что не нужно, поэтому то, что нужно индексируется быстрее.

Бородин Антон. 411-22-05, icq 199228260, bomass [at] ya.ru Домен .ru за 6,3$ (http://webst.ru/?id=146)
Н
На сайте с 15.03.2005
Offline
11
#14

Ага. Спасибо, понял.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий