Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt запрещен правилом

Belomor
На сайте с 28.02.2012
Offline
38
Belomor
718

Здравствуйте, не могу понять в чём причина того, что в панели вебмастера яндекса для сайта появился жёлтый треугольник с восклицательным знаком который сообщает о том, что

14.10.2012 наш робот получил полный запрет на индексирование сайта в Вашем файле robots.txt. Пожалуйста, воспользуйтесь формой проверки. Если запрет все еще присутствует, то по вопросу устранения этой проблемы Вам нужно обратиться к администратору Вашего сайта или хостеру. Если сейчас запрет отсутствует, то сообщение обновится в течение 2–3 дней.

на сайте robots.txt для DLE взятый здесь http://alaev.info/blog/post/3900

даже если удалить его или чистый просто оставить или родной длешный впихнуть результат проверки один и тот же

в панели анализа пишет

User-agent: ia_archiver

Disallow:

User-agent: *

Disallow: /

мол запрещен правилом

сейчас и в гугле Обнаружены серьезные ошибки, связанные с состоянием сайта.

Для робота Google установлен запрет на http://goodlend.ru/

как такое может быть и что с этим делать?

yanus
На сайте с 21.01.2009
Offline
348
yanus
#1

Вы его как настраиваете? Через админку DLE? Вручную? Что открывается, если зайти на сайт по адресу sait.ru/robots.txt ?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий