Проблемы индексации: Yandex Bot & Connection: keep-alive

1 234
T.R.O.N
На сайте с 18.05.2004
Offline
314
#31
Dwarf:
Да и не замечал я проблем с индексацией серверов на IIS.

На своем опыте убедился - проблем нет.

По все видимости BB говорит о другом.

Когда к IIS пытался прикрутить пхп, увидел просто бредовые ответы сервера, где в строке Content-length было указано - Scripting send. Встречал в триальных ISAPI - когда заголовок выглядил HTTP/1.1 200 Super. (Такое далала триал версия скрипта)

От воздержания пока никто не умер. Хотя никто и не родился! Prototype.js был написан теми, кто не знает JavaScript, для тех, кто не знает JavaScript (Richard Cornford)
Dwarf
На сайте с 06.10.2004
Offline
60
#32
T.R.O.N:
На своем опыте убедился - проблем нет.
По все видимости BB говорит о другом.
Когда к IIS пытался прикрутить пхп, увидел просто бредовые ответы сервера, где в строке Content-length было указано - Scripting send. Встречал в триальных ISAPI - когда заголовок выглядил HTTP/1.1 200 Super. (Такое далала триал версия скрипта)

Давайте отделим мух от котлет :) Т.е. кривые приложения/фильтры и т.д. от IIS. Он тут совсем не виноват :) По теме: если имеет место быть нестандартное поведение бота, следует отправить в саппорт Яндекса надлежащим образом оформленный баг-репорт (с указанием версии ОС, версии перла, логами сниффера и т.п.). Если же имеет место быть кривое приложение, то надо исправлять его. Сугубо ИМХО.

Деревянные окна (http://www.wood-win.ru/)
T.R.O.N
На сайте с 18.05.2004
Offline
314
#33

Dwarf,

полностью согласен. Но ТС не указал никакой конкретики, BB высказал мнение о возможных проблемах.

Мнея в этом все очень удивило, что проблема смогла появится, ибо эксперементировал много, но такиго не видел.

N
На сайте с 18.05.2003
Offline
100
#34

Подозреваю, что у меня примерно такие же проблемы, что у ТС...

Добавляем сайт http://soro.ru в http://webmaster.yandex.ru/

Получаем ответ:

===================

Добавление URLа

К сожалению, мы не смогли дождаться ответа от soro.ru. Рекомендуем

обратиться к вашему хостеру для улучшения времени ответа сервера.

===================

С любого места в сети коннект происходит меньше чем за секунду.

Может быть робота смущают заголовки от сервера:

===================

HTTP/1.1 200 OK

Date: Fri, 20 Apr 2007 11:10:57 GMT

Server: Apache/1.3.37 (Unix) mod_ssl/2.8.28 OpenSSL/0.9.7e PHP/4.4.6 mod_perl/1.29

FrontPage/5.0.2.2510

X-Powered-By: PHP/4.4.6

Connection: close

Content-Type: text/html

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Strict//EN"

"http://www.w3.org/TR/xhtml1/DTD/xhtml1-strict.dtd">

<html xmlns="http://www.w3.org/1999/xhtml">

<head>

<title>Коттеджный поселок &laquo;Сорочаны&raquo;</title>

..........ДАЛЕЕ ВЫРЕЗАНО...............

====================

Dwarf
На сайте с 06.10.2004
Offline
60
#35

Newm, Бот Yandex-D в логах сервера есть? Во время добавления сайта через форму?

T.R.O.N
На сайте с 18.05.2004
Offline
314
#36

Newm, Вам же русским по белому написано

Newm:
К сожалению, мы не смогли дождаться ответа от soro.ru.

При чем тут заголовки. Просто нет связи между адресом бота и адресом Вашего сайта. Такое, хотя и редко, но бывает. Проблемы бывают именно в каналх связи, но чаще кривые руки у хостера. Встречал даже вариант, что хостер уменьшает свой исходящий траф, закрывая себя от роботов.

PS Попробовал зайти на сайт, вижу title и белый лист.

http://www.yandex.ru/cgi-bin/test-robots?host=soro.ru а по такому запросу воще все стоит без движения.

Ищите проблемы либо в своих скриптах либо в хостере.

И что значит в ответе сервера, строка X-Pad: avoid browser bug

У Вас там еще и FrontPage екстеншин стоит. =)

N
На сайте с 18.05.2003
Offline
100
#37
Dwarf:
Newm, Бот Yandex-D в логах сервера есть? Во время добавления сайта через форму?

87.250.252.12 - - [02/May/2007:13:32:54 +0200] "GET /robots.txt HTTP/1.1" 404 - "-" "Yandex/1.03.003 (compatible; Win16; D)"

[Wed May 2 13:32:54 2007] [error] [client 87.250.252.12] File does not exist: /home/soroch/domains/soro.ru/public_html/robots.txt

Запроса индексного файла не видно.

T.R.O.N:
При чем тут заголовки. Просто нет связи между адресом бота и адресом Вашего сайта. Такое, хотя и редко, но бывает. Проблемы бывают именно в каналх связи, но чаще кривые руки у хостера. Встречал даже вариант, что хостер уменьшает свой исходящий траф, закрывая себя от роботов.

Это мой сервер. На сервере сидит еще сотня сайтов. И все отлично индексируются. Но те сайты делали мы сами.

А конкретно этот сайт делала другая студия на смарти.

T.R.O.N:
И что значит в ответе сервера, строка X-Pad: avoid browser bug

Это где такая строка? Мне такая не приходит.

T.R.O.N
На сайте с 18.05.2004
Offline
314
#38
Newm:
А конкретно этот сайт делала другая студия на смарти.

Значит ищите проблему в этом. Я немогу даже сайт увидить, яшин бот, похоже, тоже.

Newm:
Это где такая строка? Мне такая не приходит.

http://seolab.ru/add/header.htm?request=&url=http://soro.ru/&sbm=%20Get%20headers%20&lng=1&chs=2&ims=4&

Newm:
Это мой сервер.

Тем более настроить стоит все нормально. А то по IP воще апачевский "Хелоу ворд" висит.

PS По всей видимости у Вас физ-хостинг но в какойто попе(извените)

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий