Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Disallow: *

Л
На сайте с 16.01.2009
Offline
19
лёхан
368

сейчас в роботс,

User-agent: *

Disallow: *

Это запрет на индексацию всего сайта?

ColdMAN
На сайте с 15.01.2007
Offline
97
ColdMAN
#1
лёхан:
сейчас в роботс,
User-agent: *
Disallow: *

Это запрет на индексацию всего сайта?

User-agent: *

Disallow: / # блокирует доступ ко всему сайту

А то что вы написали - это ошибка. Прочитай правила тут.

Акция! Смотри приколы бесплатно (http://jpg-1.com) -5-ти минутный перерыв.
Л
На сайте с 16.01.2009
Offline
19
лёхан
#2
ColdMAN:
User-agent: *
Disallow: / # блокирует доступ ко всему сайту

А то что вы написали - это ошибка. Прочитай правила тут.

просто сайт не индексируется, не знаю на что и думать, а из за этой директивы может не индексироваться?

apap
На сайте с 03.09.2008
Offline
161
apap
#3
лёхан:
просто сайт не индексируется, не знаю на что и думать, а из за этой директивы может не индексироваться?

покажите ссылку на сайт, скажем почему

K
На сайте с 31.01.2001
Offline
737
Kost
#4
ColdMAN:
А то что вы написали - это ошибка. Прочитай правила тут.

Вы бы лучше сами сначала почитали:

Спецсимвол '*' означает любую (в том числе пустую) последовательность символов.

Поэтому да, это запрет на индексацию всего сайта. Если не надо было запрещать, то да, это ошибка.

apap:
покажите ссылку на сайт, скажем почему

Зачем ссылку? Вроде и так понятно, все запрещено в robots.txt:

http://www.site.ru/hskfjhskjdhf.html запрещен правилом *
http://www.site.ru/ запрещен правилом *

Если не удается понять мануал (читаю по-русски без словаря, но не понимаю), то юзайте сервис http://webmaster.yandex.ru/robots.xml .

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Л
На сайте с 16.01.2009
Offline
19
лёхан
#5

Теперь, всё понял. Догадка подтвердилась. Спасибо!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий