T.R.O.N, мне это нужно для обратной цели, изучив код разных бирж убедился что "не все йогурты полезны", еле заметные тормоза вывода страниц с кодом ссылок делают эту биржу не приемлемой для меня как для покупателя ...
Все началось с того что "купив" ссылок с внутренних обратил внимание, что при учете наличия сайтов-продавцов в индексе как раз этих страниц и нет (нет, не всех, но уж очень частые совпадения), а если и есть то старые. По скольку "другие" сайты не совсем доступны для меня в качестве анализа, я решил провести эксперимент. Сделал пару десятков ресурсов, распихал на свои + дружественные сервера, выставил код основных популярных бирж и ... наблюдал. Получил результат - снес все к этой маме.
По каждой бирже есть теперь "понятки". Перечислять не буду ибо это уже будет реклама/антиреклама. (T.R.O.N - если вам интересны детали - в привате, в асе и т.п., спасибо за ваши ответы).
отлично :), надо было мне сразу разбирать по пунктам .. ступил, извиняйте
так вот, заходит значит робот, п.1. > п.2 > п.3 все оки, типа апач ответил, отдал 200, и вот скрипт страницы начиет на пол пути тормозить, типа пытается выполнить какой-либо запрос, к той же БД, и .. тормоза тормоза тормоза ...
Так вот вопрос мой как раз касался того, что какое время робот будет ждать окончательную передачу данных. Из вашего ответа я так понял 3000 мсек. Я правильно понял?
допускаем что я
и вот такого "меня" интересует, сколько робот индексатор будет ждать от хоста ответ на запрос конкретной страницы?
И зачем, спрашивается, надо было создавать эту тему, разводить фактически очередной флуд, когда Вы изначально знали результат? Не уже ли я прав и у вас действительно много свободного времени :) Вы разве узнали из этого обсуждения что то новое, чего не знали? Зато "раздраконили" определенную часть аудитории этого форума, а оно надо? // эх ...
Здесь вопрос уже не сколько о конкретных ресурсах и их индексировании, сколько о нас тройках робота и времени ожидания получения контента.
В 60 сек верится с трудом, ну может только для главной, но не логично робота настраивать на 60 сек ожидания каждой страницы от "многотысячного" ресурса. Да 30 тоже "не мало". Не уже ли нет таких данных? Никто не отслеживал?
не :), поздравлял и одаривал я :)
а вот женщины в ответ, на радостях ..... в итоге получается что в плюсе
к примеру, за сделанный на заказ букет в корзине (2500 рублей) для "знакомой" женщины был избавлен (на радостях) от похода в ресторан (экономия 8-10т рублей) и тут же одарен "женским вниманием" :) ну и так далее :)
после подсчета затрат и "отдачи" подчитал что как минимум на 19000 рублей я в плюсе :)
не, про сервер .. это было первое на что я решил глянуть, так что это исключаем .. тянет долго и до конца :)
мне интересно сколько ждет индексатор ! ????
это была случайность или всеж 7-10 сек. торможения выдачи контента имеют значение?
Еще раз повторюсь:
На одном и том же ресурсе, когда видит одну две страницы с тормозами - идет дальше, когда с десяток (все тех же страниц, с тех же скриптов и т.п.) - уходит.
И еще столько же.
уход был зафиксирован даже с 30-ти страничного ресурса, количество точно в данном случае не имело значения, что таймаут существует это просто очевидно, без него просто нельзя, но вот его значение - ?