Как пускать на сайт пауков по-ночам?

12
SX
На сайте с 05.04.2004
Offline
83
1067

Скажите, можно ли сделать так, чтобы пауки лазили по сайту только ночью?

А то сервер грузится как-то очень уж сильно в последнее время...

Marketing2.Ru (http://Marketing2.Ru)
Kislov
На сайте с 29.04.2006
Offline
185
#1

Нельзя

10 нельзя

grey109
На сайте с 15.06.2005
Offline
180
#2

Боты Яндекса, Рамблера и так преимущественно ходят по сайтам с 0 до 10-11 часов. Гугл, Яхо - круглосуточно :-)

SplideX:
А то сервер грузится как-то очень уж сильно в последнее время...

Как бы от вашей затее не пострадал сайт. Думаю разумнее подумать о смене хостера/сервера.

Ну а если уж совсем никак: смотри на юзерагент и если время дневное - выдавай ботам пустую страницу или "приходите ночью" :-) Но повторюсь, при этом способе у тебя есть все шансы выпасть из индекса - клоакинг как никак.

SH
На сайте с 17.11.2003
Offline
183
#3
SplideX:
Скажите, можно ли сделать так, чтобы пауки лазили по сайту только ночью?
А то сервер грузится как-то очень уж сильно в последнее время...

Попробуйте отдавать сайт частями, дросселирую выдачу для одного IP коннектами.

Должно помочь.

Грамотные интересные авторские тексты, копирайтинг, рерайтинг. (/ru/forum/829527) С 1.11.2008г. сайт SavaHost.com и я - разные люди. Хостинг не продаю, ссылки не покупаю, тихо жду пенсии... :)
OZE
На сайте с 21.05.2006
Offline
152
OZE
#4

может попробовать все-таки оптимизировать скрипты, перенастроить веб-сервер, ну в крайнем случае сделать кластер, а не мудрить?

себе же дороже

SX
На сайте с 05.04.2004
Offline
83
#5

у меня VPS, там не хватает памяти, а новый план стоит в 2 раза дороже.

OZE
На сайте с 21.05.2006
Offline
152
OZE
#6
SplideX:
у меня VPS, там не хватает памяти, а новый план стоит в 2 раза дороже.

ну тогда из вышесказанного можете попробовать "оптимизировать скрипты, перенастроить веб-сервер"

или покупайте дедик

S
На сайте с 28.10.2005
Offline
313
#7
SplideX:
Скажите, можно ли сделать так, чтобы пауки лазили по сайту только ночью?
А то сервер грузится как-то очень уж сильно в последнее время...

Только разве специальным метатегом, типа: пауки лазейте по мне только ночью темною, я вас не боюсь, ибо мазохист+)

Не в ту сторону роите

SX
На сайте с 05.04.2004
Offline
83
#8
semenov:
Только разве специальным метатегом, типа: пауки лазейте по мне только ночью темною, я вас не боюсь, ибо мазохист+)
Не в ту сторону роите

а куда рыть?

K
На сайте с 31.01.2001
Offline
737
#9

Ройте тут:

SplideX:
А то сервер грузится как-то очень уж сильно
Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
GFF
На сайте с 18.09.2006
Offline
38
GFF
#10
SplideX:
Скажите, можно ли сделать так, чтобы пауки лазили по сайту только ночью? А то сервер грузится как-то очень уж сильно в последнее время...

У Гугля в сервисе для вебмастеров можно попросить индексировать сайт ПОРЕЖЕ (но не в определённое время, конечно).

У меня на сайты Гугль приходит с 21 до 6 часов по Москве, никому не мешая :)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий