robots.txt для DLE

Viki87 · 2011-07-13T18:22:40.0000000Z

Подскажите пожалуйста, как закрыть от индексации все файлы с расширением html (собственно сами новости и статические страницы)?

Viki87

14 июля 2011, 18:25

#11

cheredov:
Вряд ли эта ошибка связана с запретам доступа роботам к файлам *.html. Не работает одно из зеркал. Проверьте зеркала сайта.

Вот именно после установки тех строчек в htaccess зеркало перестает работать, удаляю строчки - все работает.

125

cheredov

14 июля 2011, 20:43

#12

Viki87:
Вот именно после установки тех строчек в htaccess зеркало перестает работать, удаляю строчки - все работает.

А какое зеркало перестает работать?

cheredov добавил 15.07.2011 в 07:48

Их поддержка отвечает:

Сообщение системы означает, что на текущий момент одно из зеркал сайта недоступно, статус ответа сервера зеркала отличен от 200 или от 301.

cheredov добавил 15.07.2011 в 07:50

Пообщайтесь с ними по поводу этой ошибки. У меня там проектов нет, не хотят особо отвечать 🍿

Выдача яндекса по региону Стоит ли заморачиваться на www в домене