tysson

tysson
Рейтинг
282
Регистрация
03.02.2009
Wings Of Fury:
нет, он заходит выборочно.

Вообще алгоритмы и пути просмотра могут быть самыми разными. Он может выборочно просматривать какие-либо страницы. Может обходить страницы сайта на которые нашел ссылки в сети, может делать запрос серверу о дате последних изменений каких-либо страниц, если дата последнего изменения соответствует тому что у него в индексе, он на неё даже не зайдёт, если же нет, то зайдёт проиндексирует ... но если таковых страниц много то может поставить в очередь на обход и проиндексировать в следующий раз или еще позже. НУ а в твоей ситуации если он их у тебя еще 4500 нашел, то он был занят этими 4500 а не твоей главной ... посмотри что это за страницы, и подумай не способен ли он еще найти страниц о существовании которых ты пока не знаешь, а то он до твоей главной может никогда не добраться.

не хватает мозгов понять, откуда страницы взялись!

Значит яша уже как почти месяц не заходил на мою главную страницу. А я над ней работаю, постоянно обновляю!

мог бы и почаще. я свято верил, что он начинает обход сайта с главной страницы! ведь и на нее ссылки закупаются и контент на ней соответствующий!

а хостинг дает только последние 500 логов. соответственно они только сегодняшние.

вот это гугл я так понял:

66.249.65.88 - - [13/Sep/2009:08:59:07 +0400] "GET /robots.txt HTTP/1.1" 200 648 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)"

с картой проблема, такое чувство, что робот по кругу ходит. я его останавливал на 5000 странице, хотя на сайте больше 300-500 быть не может. не понимаю

вот это лог?

94.127.144.38 - - [13/Sep/2009:13:58:49 +0400] "GET /page/vasilinka28/ HTTP/1.0" 404 1843 "-" "Mozilla/5.0 (compatible; Dolphin/1.0; +http://telehouse.ru/crawler.html)" 94.127.144.38 - - [13/Sep/2009:13:58:51 +0400] "GET /page/xakser1/ HTTP/1.0" 404 1843 "-" "Mozilla/5.0 (compatible; Dolphin/1.0; +http://telehouse.ru/crawler.html)" 213.31.11.80 - - [13/Sep/2009:15:51:29 +0400] "GET /modules/mod_virtuemart_s5_dropdown_cart/s5_dropdown/s5_dropdown.js HTTP/1.1" 304 - "-" "Mozilla/4.0 (compatible;)" 213.31.11.80 - - [13/Sep/2009:15:52:04 +0400] "GET /modules/mod_virtuemart_s5_dropdown_cart/s5_dropdown/background.png HTTP/1.1" 304 - "-" "Mozilla/4.0 (compatible;)" 66.249.65.89 - - [13/Sep/2009:15:59:42 +0400] "GET /robots.txt HTTP/1.1" 200 648 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" 66.249.65.89 - - [13/Sep/2009:15:59:42 +0400] "GET /google849aff0c5aa354eb.html HTTP/1.1" 200 5 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" 94.127.144.38 - - [13/Sep/2009:16:13:41 +0400] "GET /page/holiran/Operation%20canceled HTTP/1.0" 404 1843 "-" "Mozilla/5.0 (compatible; Dolphin/1.0; +http://telehouse.ru/crawler.html)" 94.127.144.38 - - [13/Sep/2009:16:13:43 +0400] "GET /page/innamedvedeva/Operation%20canceled HTTP/

Wings Of Fury:
tysson,
Не знаю, я их хостингом не пользовался. Где-то в панели управления должны быть. Почитай хэлпы, поковыряй панель управления, в службу поддержки напиши ...

Wings Of Fury добавил 13.09.2009 в 19:05
Вообще как совет, если хочешь чтобы побыстрее переиндексировал страничку:
1. Можешь купить пару-тройку ссылок хороших на неё
2. Сделай карту сайта с и дату последнего изменения поставь недавнюю, и важность поставь 1 - тобишь самую высокую.

И то и другое мне помогало.

Cайт мэп есть. Ссылки уже закуплены и проиндексированы.

пойду логи искать

Благодарю!

А как логи смотрятся? хостинг, NIC.RU

moldu:
Попробуйте Йоту. 900 рублей анлим, при скорости до 10Мбит.

Можно, как это сделать на форуме много раз писалось, поищите.

мегафон роднее и дешевле на 250 руб!

tysson добавил 08.09.2009 в 12:38

fima32:
Если 3G, то еще нормальная скорость, а вот если простой GPRS юзать на два компа - то очень мала скорость.
Два компа связать реально: либо один подключаете к телефону, а другим лазите в интернет через него, либо надо мутить какой-нить старенький комп под сервак.

3G однозначно!

конечно один к модему, а вот как технически второй подключить?

Каширин:
Денис, Земля вот тоже круглая, но ты этого не замечаешь ;) Вот и для электронов твой изгиб - как кривизна Земли :)

а я вот замечаю, что она круглая! и еще маленькая! Мне тесно.......аааааа, всех убью, один останусь!

Санкт-Петербург...

Всего: 2969