Проблемы индексации: Yandex Bot & Connection: keep-alive

123 4
jackal
На сайте с 27.04.2006
Offline
80
#11
T.R.O.N:
Те скрипты, которые Вы пишите все делают согласно правил???

Конечно :) Иначе зачем люди писали RFC? :D

T.R.O.N:
Если Вашу настройку сервака, так просто поставить в тупик, то это тольок подтверждает правило
"Если строить города, как программеры пишут софт - то первый дятел уничтожит цивилизацию"

Дятел дятлу рознь :) Если яндекс ведет себя как дятел - это уже ненормально имхо ;)

Партнерка metaprofit.net (https://metaprofit.net/)
T.R.O.N
На сайте с 18.05.2004
Offline
314
#12
jackal:
Конечно Иначе зачем люди писали RFC?

для того же, для чего написана конституция. Чтобы было понтово. Вы скрее всего даже почту отправляете с нарушением того самого RFC (сели у вас стоит прокс или внутренний сервак).

На счет дятла - если даже бот (который в большенстве случаев все делает нормально на остальных сайтах) может корячить сервак - то вину нужно искать не в нем.

Если проблемы с ботом, запретите ему ходить к себе на сайт, и все. Или внесите в игнор сетку IP яндекса.

PS Еще раз повторюс. Много сайтов моих стоит именно под IIS с перлом, пхп и т.д. Все нормально. Здесь явное проявление кривизны настроек или рук.

От воздержания пока никто не умер. Хотя никто и не родился! Prototype.js был написан теми, кто не знает JavaScript, для тех, кто не знает JavaScript (Richard Cornford)
YuraZ
На сайте с 05.06.2006
Offline
95
#13

> для того же, для чего написана конституция. Чтобы было понтово.

детский сад :) Если яндекс не поддерживает стандартов, то виноваты стандарты. Супер.

Суть простая, получил Connection: close - устанавливай новый connect, яндекс этого не делает. Но налетели все почему-то на топикстартера по вопросу кривизны рук. По-моему не на того налетели то :)

jackal
На сайте с 27.04.2006
Offline
80
#14

Помоему, тут идет подмена понятий :)

Значит, когда кривые сайты отдают боту яндекса загзипованный контент, хотя бот яндекса в заголовках говорит, что он не понимает гзип - виноваты вебмастера кривых сайтов (не спорю). А когда кривой бот яндекса не закрывает соединение, хотя сервер ему в заголовках говорит, что соединение надо закрыть - опять виноваты вебмастера?

Где логика? :)

То, почему у ТС отключен кипалив - это второй вопрос. Пусть у него руки кривые :) В данном контексте это неважно. Топик про то, что бот яндекса - дятел, и не закрывает соединение когда ему об этом говорят :D

T.R.O.N
На сайте с 18.05.2004
Offline
314
#15
YuraZ:
Если яндекс не поддерживает стандартов, то виноваты стандарты.

Вы увидили в словах то, что хотели увидить. Принцып любой устойчивой системы в том, что если что-то идет не так, она должна восстановится сама. ТС же говорит о том, что таки обращения вызывают проблемы. У других, такого нет. Так кто виноват?

YuraZ:
Суть простая, получил Connection: close - устанавливай новый connect, яндекс этого не делает.

Вы готовы это подтвердить?

Ведь для IIS вопросы с коннектом напрямую увязаны с указателем сессий. Поэтому бот, видимо, какраз и защищается от подобных вещей (неаученный горьким опытом кучи страниц на пхп с SID)

YuraZ
На сайте с 05.06.2006
Offline
95
#16

> Вы готовы это подтвердить?

Я не готов этого подтвердить, т.к. IIS в глаза не видел, выводы сделаны из поста топикстартера.

> Поэтому бот, видимо, какраз и защищается от подобных вещей (неаученный горьким опытом кучи страниц на пхп с SID)

SID или в куках или в урле передается. Причем здесь коннекты. Сессии работают не только в пределах одного кипалива, о чем вы.

T.R.O.N
На сайте с 18.05.2004
Offline
314
#17

YuraZ, поищите по форуму, о проблемах с сессиями. Куки боту неважны. Он их просто не понимает. А вот SID в урле, это для него смерть.

jackal
На сайте с 27.04.2006
Offline
80
#18
T.R.O.N:
Поэтому бот, видимо, какраз и защищается от подобных вещей (неаученный горьким опытом кучи страниц на пхп с SID)

Ага, вот даже как. Т.е. яндексоиды специально, оказывается, сделали кривого бота :D

По сабжу - бред. Механизм сессий встроен в пхп, и сессии хранятся на диске в файлах. Соединения тут ни причем.

Да и кипалив 60 секунд хранится :) Значит, залогинился на форум, сходил поссать :) возвращаешься - и всё, заново логиниться? Что-то ни разу такого не встречал :)

YuraZ
На сайте с 05.06.2006
Offline
95
#19

> YuraZ, поищите по форуму, о проблемах с сессиями. Куки боту неважны. Он их просто не понимает. А вот SID в урле, это для него смерть.

А причем здесь принудительные кипаливы? Вот я чего не понимаю. Как они решают проблему sid в урлах?

di_max
На сайте с 27.12.2006
Offline
262
#20

Имхо, вы уж не в туда порулили...

- Тяпнитца что-ль?;)

По сабжу - если на сервере все пральна - с роботом Яндекса проблем нет.

Иначе - рихтуем сервер, админа и всех подряд...;)

// Все наши проблемы от нашего не знания...
123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий