Яндекс поменял отношение к роботс.txt или глюк?

_
На сайте с 20.10.2006
Offline
197
735

1. http://yandex.ru/robots.txt

User-Agent: *

Disallow: /

2. http://help.yandex.ru/webmaster/?id=996567

Использование директив Disallow и Allow.

Чтобы запретить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Disallow'. Примеры:

Disallow: / # блокирует доступ ко всему сайту

3. http://yandex.ru/yandsearch?serverurl=www.yandex.ru

Нашлось 4 страницы

Вечные ссылки на качественных англоязычных площадках. (/ru/forum/883099) Результат гарантирую!
A1
На сайте с 11.01.2006
Offline
46
#1

Просто в выдаче у них домен с www.

А вот по этому адресу уже другой robots,

в котором нет запрета полной индексации:

http://www.yandex.ru/robots.txt

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий