Форум Сайтостроение Веб-строительство

ошибка в заголовке?

Оу!
На сайте с 19.12.2007
Offline
239
Оу!
621

на сайте http://robotstxt.org.ru/RobotstxtErrors прочитал:

Сервер должен возвращать в HTTP-заголовке для robots.txt «Content-Type: text/plain» а, например, не «Content-Type: text/html». Неправильный заголовок может привести к тому, что некоторые роботы не обработают файл.

при просмотре HTMl кода моего сайта, выдаёт именно второй вариант «Content-Type: text/html».

Это у меня ошибка или всё-таки на сайте ошиблись? просто такая строка прописывается по умолчанию в скрипте datalife.. неужели разработчикаи такие неграмотные..

прошу разобраться

Купить мобильные прокси со скидкой 20%: https://surl.li/eijqnt
mfl
На сайте с 16.10.2006
Offline
134
mfl
#1

DLE тут не причем, сервер возвращает данный заголовок для текстовых файлов (если robots.txt - не скрипт)

mfl добавил 06.04.2008 в 21:45

при просмотре HTMl кода моего сайта, выдаёт именно второй вариант «Content-Type: text/html».

Причем тут вообще html код сайта?

mfl добавил 06.04.2008 в 21:47

http://www.bertal.ru/

введи адрес своего robots.txt и проверь какой заголовок возвращает

Оу!
На сайте с 19.12.2007
Offline
239
Оу!
#2

спасибо. неправильно понял, да и не вкурсе был.

всё нормально

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий