robots.txt - помогите немного

N
На сайте с 20.10.2009
Offline
26
1002

Господа, если в роботс.тхт прописано:

User-agent: *

Disallow:

Может ли это как-то повлиять на индексацию?

Тк Disallow все-таки означает запрет к индексации, но насколько мне известно, чтобы запретить все странички к индексации надо прописать:

User-agent: *

Disallow: /

Очень надеюсь на вашу помощь.

Психиатр
На сайте с 16.11.2010
Offline
360
#1

Disallow: разрешает к индексации

Disallow: / запрещает к индексации

Следовательно, не может.

IV-й
На сайте с 23.06.2009
Offline
159
#2

"Disallow: " - не может

Цахес
На сайте с 15.03.2007
Offline
205
#3
Психиатр:
Disallow: разрешает к индексации
Disallow: / запрещает к индексации

Если быть точным, то

разрешает 'Allow:', а 'Disallow:' не запрещает. ;)

- Хорошие и плохие тексты для ваших сайтов (http://www.textsale.ru/team57397.html). - Удаленная работа. Вакансия копирайтера/рерайтера. (http://advego.ru/6myq8sgvKk) - Быстрое составление семантического ядра (https://topvisor.ru/?inv=39380).
Психиатр
На сайте с 16.11.2010
Offline
360
#4
Цахес:
Если быть точным, то
разрешает 'Allow:', а 'Disallow:' не запрещает. ;)

Конечно, это так. Я просто сказал примечательно к Disallow.

N
На сайте с 20.10.2009
Offline
26
#5

спасибо большое.. просто гадаю почему домен вылетел из индекса яши полностью... ни главной ни чего ваще в индексе нет, хотя было, а в аддурл добавляется - значт не под баном... странно все это

Цахес
На сайте с 15.03.2007
Offline
205
#6

C хостингом проблем не было?

IV-й
На сайте с 23.06.2009
Offline
159
#7
nooklp:
спасибо большое.. просто гадаю почему домен вылетел из индекса яши полностью... ни главной ни чего ваще в индексе нет, хотя было, а в аддурл добавляется - значт не под баном... странно все это

Адурилка не показатель бана, пробейте в кэше морду

N
На сайте с 20.10.2009
Offline
26
#8
C хостингом проблем не было?

с хостингом проблем точно не было

Адурилка не показатель бана, пробейте в кэше морду

а как пробить в кеше морду? у меня вебмастер.яндекс.ру говорит:

загружено роботом: 278

страниц в поиске: 0

Ну и как-то по запросу в яше

www.[domenname].ru
- выдает главной страничку твиттера ваще теперь %))) и еще перед первой позицией "Перейти на www.[domenname].ru"

«url:www.[domenname].ru»
выдает пустоту =(
Z
На сайте с 01.06.2008
Offline
182
#9

ТС, почитайте здесь http://help.yandex.ru/webmaster/?id=996567

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий