Mage1

Mage1
Рейтинг
83
Регистрация
05.07.2007
JeM:
12 сент. мой сайт пролностью выпал из индекса. Я стал смотреть логи за 11 сент. и заметил, что приходил Яндекс дятел. Вот строка

11/Sep/2007:01:48:18 +0400] "HEAD / HTTP/1.0" 200 0 "-" "Yandex/2.01.000 (compatible; Win16; Dyatel; C)"

Видно, что он получил ответ 0 байт. Не может ли быть это причиной выпадения из индекса?

это может быть только причиной неотображения в яндекс.каталоге (до устранения проблем с сайтом).

Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.

SeoMeo:
Хотел провести что-то вроде опроса, считаете ли вы сайт http://chelport.ru коммерческим? Господа модераторы каталога. Что делать принципиально хочется попасть в каталог бесплатно (бьюсь 3 год).

Ваше мнение для меня сиграет очень важную, роль, если всё-таки проект окажется коммерческим, что ж, придётся платно регистрироваться.

сайт коммерческий http://chelport.ru/modules.html?name=Content&pa=showpage&pid=19 , http://chelport.ru/autohtml.php?filename=host/host.htm , но это не является критерием приема/не приема в ЯК на бесплатной основе. При регистрации на платной основе это будет означать бОльшую стоимость регистрации.

бывает такое, у меня после перезагрузки браузера (закрыть все запущенные окна эксплорера) проходило, можно для верности комп перезагрузить.

Andreyka:
А что влияет на LA? io или usr? Это две большие разницы

как это определить?

Andreyka:
И зачем настраивать сервер плохо?

вопрос риторический :)

LineHost:
Задумайтесь почему ни кто не отвечаеть. Я залез с коментаром только потому, что поисковой движёк меня очень интересует, так как есть намеченный проект. По теме отвечать нечего, так как исходных данных "0".
Задавая вопрос, надо дать исходные данные. То есть какой сервер на данный момент выполняет задачу, где производится поиск (жёсткий диск, местный лан, удаленные сервера и так далее), на что жалуемся, какие признаки проблем и так далее. Если вопрос про то, что надо проиндексировать какие то 4 GB документов, тут просто смех, ставте PII и при грамотной настройке всё должно работать нормально.
Не зря ходят такие слухи, что на умный вопрос ответ даром, на глупый начинаем от 20 долларов ;)

При постановке вопроса считал, что размера документов (4Гб) и индексных файлов (2Гб) (2 Слава Шевцов - если бы ставил впервые - не знал бы размера индексных файлов) достаточно.

Ок, предположим, что я ошибся, привожу данные текущего сервера

P4 2.4 Ghz, 1Gb RAM, 2x80Gb IDE RAID 1

документов 4 Гб, индексных файлов 2Гб

с выключенным поиском load average 0.4 (работает сайт, не работает поиск)

с включенным поиском load average принимает значения 20,30 и выше, поиск почти постоянно недоступен

в сутки выполняется поисковых запросов в среднем 15000 (но это только те, что "пролезли", т.к. сервер перегружен и многим отказывает.

надеюсь, все что нужно для ответа указал.

чтобы предупредить сообщения вида 15000 в сутки это 1 запрос в 5 секунд и дело в плохой настройке сервера - распределение по времени суток не равномерное, соответственно в пике будет в несколько раз больше (к сожалению, статистики по пиковым значениям запросов в единицу времени не имею, распределение посещаемости в зависимости от времени суток примерно как в среднем в сети http://www.liveinternet.ru/stat/ru/hours.html?slice=ru ).

Kislov:
Миф или реальность?
Есть мнение что реальность (не моё).

Технически не представляет большой проблемы фильтрация неуникального контента при индексации, но является проблемой определение первоисточника, поэтому индексируется все.

LineHost:
Вы сервер для Яндекса заказываете? Или хотите открыть конкурирующую контору ? 😂

Ценю ваше остроумие, но нельзя ли ответить по теме? В комментариях к минусу вы написали, что нужно грамотно ставить вопрос, сформулируйте грамотнее, если можете.

RussianRro:
скопировали мой сайт

Тот кто скопировал посылает меня и откровенно подсмеивается ну да типа скопировал и что дальше урод.....

с таким братком первый столкнулся ))

В суд обращаться долго дорого и несовсем уверен что результат будет

думал думал и решил на его сайт трафик западный бесполезный и развлекательный гнать порядка 20000 хитов в сутки думаю его виртуальный хостинг не выдержит а VIP или VPS не выгодно будет.

естественно хостера просил отключить сказали "только через суд"))

И сколько хитов будет достаточно чтобы виртуальный хостинг лег?

Кто нибудь боролся подобным образом с ворами и каков был результат?

сталкивался с этим сам. считаю, что действия должны быть обоснованы экономически, т.е. если вы ощущаете реальные финансовые потери от того, что в сети находится копия вашего сайта на другом домене, можно предпринимать какие-то действия, затраты на которые не будут превышать ваших потерь, а в противном случае - просто потратите время и деньги зря.

search bot:
Бежать впереди паровоза неблагодарное занятие.
Не думаю что яндексойды изобретут велосипед 2ой раз. Делайте все как и раньше делали. Все равно яша еще работает по старой схеме, а новая будет отличаться только другими приоритетами факторов ранжирования. (имхо)

приоритеты факторов ранжирования меняются каждый ап, а вот смена алгоритма встречается раз в пятилетку. не то, чтобы каждая смена алгоритма - революция. но все же изменения более существенные, чем коррекция степени влияния факторов ранжирования на релевантность.

Елистратов:
Под гугл не стараються продвигать сайты, дабы не выгодно...Потому там и выдача чище намного..ИМХО

точно...если предрекаемое многими тут "убийство яндекса гуглом" состоится, все оптимизаторские силы рунета будут брошены на гугл и появится тема "Злобные дядьки из Гугл" (потеряли мой сайт под гнетом сеошников).

Всего: 369