Форум Практика оптимизации Любые вопросы от новичков по оптимизации

302 вместо ожидавшейся 404

SQ
На сайте с 17.10.2011
Offline
75
SPQ
295

На сайте нет robots.txt . Сайт относительно простой, никаких проблем с зеркалами или индексацией нет, поэтому и не стал его добавлять. Думал что в крайнем случае при запросе robots.txt будет выдаваться 404. Оказалось что выдается 302. Вот пример из лога.

182.118.25.211 ****.ru - - [26/Mar/2013:09:50:00 +0400] "GET /robots.txt HTTP/1.1" 302 211 "http://****.ru/robots.txt" "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.8.0.11) Firefox/1.5.0.11; 360Spider" 1034 0

Кто-нибудь может пояснить почему именно 302 при отсутствии файла ?

footballstar
На сайте с 20.07.2010
Offline
94
footballstar
#1

если не ошибаюсь, причина в том, что не настроена обработка 404 ошибки. поищите в интернете, 404 через htaccess.

п.с. если сайт на cms, robots в любом случае будет кстати.

SQ
На сайте с 17.10.2011
Offline
75
SPQ
#2

cms на сайте нет, 404 настроено вот так:

ErrorDocument 404 http://****.ru/index.htm

Но я нигде не нашел ответа на вопрос, распространяется ли ErrorDocument на robots.txt ...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий