Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Идиотизм?

ruSkif
На сайте с 31.08.2008
Offline
12
ruSkif
469

Всем День добрый!

на сайте заказчика вместе с обычным robots.txt лежит robots.php с таким кодом:

if (stristr($_SERVER['HTTP_HOST'],'www.*****.ru'))

{

echo "User-agent: Yandex

Disallow:

Host: www.*****.ru";

}

else

{

echo "User-agent: Yandex

Disallow: /

Host: www.*****.ru";

так как я пока афрооптимизатор, и неважный знаток php, то хочется спросить, это нормально?

ps при удалении он не дает посмотреть txt версию(((

У Яндекса действует только один фильтр - на наличие здравого смысла в сером веществе.
K
На сайте с 31.01.2001
Offline
737
Kost
#1

Посмотрите, что выдает веб-сервер по адресу http://****.ru/robots.txt и http://www.****.ru/robots.txt .

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
ruSkif
На сайте с 31.08.2008
Offline
12
ruSkif
#2

вот такую бредятину по обоим запросам:

User-agent: Yandex Disallow: / Host: www.******.ru

и именно в строчку.

panic
На сайте с 04.07.2008
Offline
187
panic
#3

бред какой то, не бывает такого роботс)))

Цифровая мастерская kr.digital (http://kr.digital) - дорого!
ruSkif
На сайте с 31.08.2008
Offline
12
ruSkif
#4
panic:
бред какой то, не бывает такого роботс)))

Не бред, а суровая правда жизни! )))))

K
На сайте с 31.01.2001
Offline
737
Kost
#5

Тогда надо еще HTTP-заголовки посмотреть, возьмите Webbug или еще что-нибудь.

На файлы с расширением .txt должен выдать:

Content-Type: text/plain

а у вас, похоже, выдает

Content-Type: text/html

поэтому в броузере это в одну строчку.

NC
На сайте с 19.09.2008
Offline
0
Nata-chan
#6

Забавно :)

Проверьте, может там еще какие сюрпризы имеются?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий