уменьшения трафика

12
M
На сайте с 20.08.2004
Offline
376
#11
FreeMarket:
купи лучше хостинг с большим трафом - рано или поздно тебе придётся это сделать....

да в том то и дело, что страшновато переезжать, если нет уверенности в хостере...

может кто- что хорошее посоветует...

я вот нашел одного, плавно пробуду переехать, но чет сомнения внутри...

желательно еще что бы стоил не сильно много

отец сыночка, лапочки дочки и еще одного сыночка
I
На сайте с 22.10.2005
Offline
58
Iso
#12
maximumx:
А собственно как вы отделяете мух от котлет? Пожалуйста просвятите в данном топике.

Хорошо, давайте попробуем.

Мысль такая: много качать стоит позволять только поисковым роботам (и то, только интересным мне). Все остальные пусть качают по формуле представленной выше (<= 10 запросов в секунду, и т.д.). Ясно, что пользователь такие объёмы качать не станет. А ботам, которые мне не нужны - временный бан за превышение этих лимитов.

А интересных мне ботов (котлет :) ) я и так знаю (по IP). Это, конечно, можно называть клоакингом, но согласитесь, что словить за это санкций - очень маловероятно. Во всяком случае, это позволяет затруднять жизнь оптовым ворам контента (новичкам). Т.к., судя по логам, они смиряются с низкой скоростью скачивания с моих сайтов, после чего благополучно отваливают.

M
На сайте с 21.11.2004
Offline
230
#13
Iso:
А интересных мне ботов (котлет ) я и так знаю (по IP). Это, конечно, можно называть клоакингом, но согласитесь, что словить за это санкций - очень маловероятно. Во всяком случае, это позволяет затруднять жизнь оптовым ворам контента (новичкам). Т.к., судя по логам, они смиряются с низкой скоростью скачивания с моих сайтов, после чего благополучно отваливают.

Вот, я это и хотел узнать. Судя по вашим словам, у вас золотая жила, раз вы знаете ip ботов, и можете ими (ботами) "управлять". Так, думаю многим будет интересен списочек с ip ботов. :D

Продвигаю домены руками (http://roke.ru)
I
На сайте с 22.10.2005
Offline
58
Iso
#14

Да база-то такая собирается легко - раз в месяц просматривать сотню самых активных "качков", да добавлять в список нужных. По сути ведь это - белый список (адреса, которые не подвержены автоматическим санксиям).

Кстати, в природе есть куча мест, где оно уже лежит в каком-то виде:

http://bot.tixit.ru/user_agent/20/iplist/

Опять же у Гринвуда упоминается:

http://bloggreenwood.com/comments/D288_0_1_0_C/ (первая ссылка)

Но мне как-то было проще составлять свой список. Так оно надёжнее :)

Ведь задумывалось это всё только для того, чтобы всякий DiscoPump обламывать, когда его на сайт натравляют. А то уже устал от воров контента...

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий