BigBrother

BigBrother
Рейтинг
96
Регистрация
16.06.2006
Должность
Аналитика и управление большими системами
Интересы
Автогонки (на аватаре, как ни странно - я)
Ex - Yandex Spiderman, сейчас рулю системами "умных городов" в куче мегаполисов
burunduk:
BigBrother, вот и запалили тему :(

Я вообще сильно удивлен, что только сейчас - на мониторинге внешнем все отлично видно.

Минут 10 подумал, проверил и нашел.

Саша, закрой плиз дырку - она та же, что и была с link. Хотя это будет сложнее.

Если надо детали - аську и мобильник знаешь.

mosik_new:
я не знаю или именно эти заголовки получает Яндекс, но мне сервер ответил следующими заголовками
HTTP/1.1 200 OK

Date: Sun, 30 Mar 2008 11:34:33 GMT
Server: Apache
X-Powered-By: PHP/5.2.5-pl1-gentoo
Cache-Control: no-store, no-cache, must-revalidate
Cache-Control: post-check=0, pre-check=0
Pragma: no-cache
Connection: close
Transfer-Encoding: chunked
Content-Type: text/html; charset=windows-1251


mosik_new добавил 30.03.2008 в 15:42

Если тебе действительно интересно, могу скинуть CSM файл с урлами, которые помечены ошибкой в консоли

сможешь посмотреть какие именно заголовки отдает сервер

уже 3 месяца бьюсь над проблемой

Хммм. Заголовки выглядят нормально.

Кидай, только все не надо - достаточно пары примеров.

mosik_new:
количество ошибок все еще растет
Яндекс говорит что пока не знает в чем проблема

изменение заголовков и отключение ob_gzhandler не помогло

Ок, брось пример ответа роботу (который помечен ошибкой в консоли) - скажу точно.

Но в 98% случаев такая ошибка - chunked с переданным размером страницы - только вот апач при этом иногда не учитывает размер самих заголовков чанков. Так что либо отключай чанки, либо отключай передачу размера страницы. И проверь, чтобы в заголовках самих чанков все корректно было, особенно в последнем (он переменного размера).

bbon:
Очень странно, что никто не вспомнил историю с запросом "враг народа", когда корректировка топа произошла вручную в течение одного дня, не дожидаясь всяких апдейтов 😕
А раз один раз было - значит используется такой механизм, другое дело - насколько часто..

Все правильно, кроме того, что корректировка тогда была не вручную. И если посмотреть, что случилось чуть позже - можно даже понять какая.

Я пользовался этими - http://datarc.ru/

Недешево, но доволен.

Zender:
Хмм... Сначала спросил, а потом проверил... А смартконтекст и близко к топу не стоит (запрос контекстная реклама) Изменю тогда вопрос вы его будете продвигать в серпе, или надежды на мощь этого форума и пиар самих яндекс-директа,
Гугля и бегуна?

Ну во-первых по этому запросу сайт нашей компании в топе. Смарт мы никак не раскручивали - ибо пока бета.

Во-вторых я этим не занимаюсь, и даже не в курсе, планируется ли это (хотя думаю - да) и как будет исполнено.

Ceres:
Так ты что - вернулся что ли? Или на удаленке у них фрилансером? :)

Нет и нет.

matik:
а что так долго "наши люди" висели ? :) долго искали где гвоздь?😂

Был бы гвоздь - как раз улетел бы сразу и в пожизненный бан.

А так пришлось разбираться и алгоритмы править, чтобы не вылезал.

BigBrother добавил 21.03.2008 в 11:41

Ceres:
Ржали тремя офисами :) Сколько китайцев-яндексоидов мониторят серп - в тысячах?

Рад, что повеселил.

Весьма немного. Да и китайцев там, насколько я знаю, нет.

Не думаю, что форум удачное место для чтения развернутой лекции на тему "критерии и методы оценки консистентности и качества больших массивов данных и отслеживание флуктуаций".

Всего: 449