Форум Практика оптимизации Частные вопросы - ранжирование, индексация, бан

Пустой ответ сервера

Strigov
На сайте с 30.11.2007
Offline
101
Strigov
922

Приветствую

сайт отдает поисковым роботам нулевой ответ или закрыт от индексирования

не пойму где в коде может быть это прописано

выручайте

D
На сайте с 11.07.2011
Offline
1
doronskiy
#1

Фильтр по USERAGENT, судя по всему. Интересно, кто помог)

Поможет поиск по словам yandex или google, или даже просто bot (жестоко, однако) в файлах проекта. Скорее всего этот фильтр спрятан где-нибудь глобально - в .htaccess или в index.php

Возможно так же, что фильтрация берет свои параметры из базы данных или даже так настроен виртуальный хост на сервере, но это маловероятно.. Скорее всего, вшито кем-то прямо в код.

Блоков уже НЕТ, а "ты последний" ни за Мобильный редирект на всех
Strigov
На сайте с 30.11.2007
Offline
101
Strigov
#2

вот что отдает роботу

Код статуса HTTP: "200 OK"

Время ответа сервера: 37мс

IP сайта: 77.222.61.135

Заголовки:

Content-Language: ru

Date: Mon, 18 Jul 2011 06:22:58 GMT

Content-Length: 0

Last-Modified: Tue, 05 Jul 2011 06:33:00 GMT

Content-Type: text/html; charset=windows-1251

Connection: close

Server: Apache/2.0.63-lk.d

Кодировка: windows-1251

Размер страницы: 0Кб

Strigov добавил 18.07.2011 в 10:33

doronskiy:
Фильтр по USERAGENT, судя по всему. Интересно, кто помог)

код.

прежний мастер развлекается

Strigov добавил 18.07.2011 в 11:42

не пойму где рыть

с битриксом так себе

в настройках все номрально, с .htaccess тоже

в коде ничего криминального по поиску yandex, google, bot не вижу

Strigov добавил 18.07.2011 в 17:57

вопрос решился

нашел интересный код

$ua= $_SERVER['HTTP_USER_AGENT'];

$pos = strpos($ua, "Yandex");

if ($pos === false) {

$a=1;

} else {

exit();

die();

};

Заголовки Last-Modified и If-Modified-Since Кэширование в браузерах и Становится ли веб-мастер в

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий