Каталоги - убийцы серверов?

12
B
На сайте с 28.04.2005
Offline
81
3378

Зарегистрировал сайт 1PS-ом.

Пришло письмо от хостера - сайт вызвал перегрузку. В логах сервера несколько тысяч обращений к странице с обратными ссылками (страница динамическая и обращения к ней дают нагрузку на сервер).

Большая часть - с 4 IP. Вот они:

83.222.23.204 - 784 обращения

81.176.77.66 - 1030 обращений

204.14.134.196 - 1836 обращений

70.84.24.98 - 3075 обращений

И все это в течение часа.

Страницу со ссылками полностью не забирали, брали около 10%. Ответ сервера 200.

У кого нибудь было такое? Какие каталоги (движки каталогов) могут зацикливаться таким образом?

N
На сайте с 21.09.2005
Offline
220
#1
bmpa:
Зарегистрировал сайт 1PS-ом.

Пришло письмо от хостера - сайт вызвал перегрузку. В логах сервера несколько тысяч обращений к странице с обратными ссылками (страница динамическая и обращения к ней дают нагрузку на сервер).

Большая часть - с 4 IP. Вот они:
83.222.23.204 - 784 обращения
81.176.77.66 - 1030 обращений
204.14.134.196 - 1836 обращений
70.84.24.98 - 3075 обращений

И все это в течение часа.

Страницу со ссылками полностью не забирали, брали около 10%. Ответ сервера 200.

У кого нибудь было такое? Какие каталоги (движки каталогов) могут зацикливаться таким образом?

А это не DDOS случайно?

Поисковое продвижение сайтов в разных тематиках. 641-222
pastuhoff
На сайте с 29.10.2005
Offline
229
#2

Если не секрет - что за хостер не справляется с такими нагрузками?

Коллекционер доменных имен.
B
На сайте с 28.04.2005
Offline
81
#3
Nitro:
А это не DDOS случайно?

Какому то каталогу не понравились заголовки и он решил атаковать?:)

Astaldo
На сайте с 28.01.2006
Offline
174
#4

Ну это если только они пристают в плане проверки налиия обратки - больше ничего в голову не приходит...

Live as if you were to die tomorrow. Learn as if you were to live forever. Mahatma Gandhi
B
На сайте с 28.04.2005
Offline
81
#5
pastuhoff:
Если не секрет - что за хостер не справляется с такими нагрузками?

Хостер нормальный.

На самом деле регистрировалось сразу несколько сайтов, у которых коды ссылок храняться в одном месте.

Цифру привел для примера, среднюю для каждого сайта. Реальная нагрузка на хостера больше в несколько раз.

shmanci
На сайте с 01.11.2005
Offline
37
#6
На самом деле регистрировалось сразу несколько сайтов, у которых коды ссылок храняться в одном месте.

вот и ответ :)

ну и все же "-" хостеру, хотя неизвестно сколько у Вас "несколько сайтов".

продам морду PR 5! (бизнес) (/ru/forum/92732) и PR 4 (авто-мото) (/ru/forum/95568) Открытое письмо к веб-мастерам (http://zadvornov.ru/letter.htm); я продаю домены (http://preved.net/) платные каталоги PR 4 (http://www.noc-iki.ru); PR 5 (http://www.rubc.biz)
B
На сайте с 28.04.2005
Offline
81
#7
shmanci:
вот и ответ :)

ну и все же "-" хостеру, хотя неизвестно сколько у Вас "несколько сайтов".

Это не ответ. Не думаю, что такое поведение каталогов нормально.

shmanci
На сайте с 01.11.2005
Offline
37
#8
bmpa:
Это не ответ. Не думаю, что такое поведение каталогов нормально.

абсолютно нормально :)

ну просто сами подумайте.

давайте посмотрим логично: Вы берете 1 сайт и прогоняете его, предположим, по 1 000 каталогов. Не зря 1пс пишет про обратные ссылки - затем мы их и устанавливаем, чтобы проверщик заходил и проверял ее, для того, чтобы нас в каталог добавили. Ведь цель именно такая?

Ну и смотрим далее - Вы добавили ссылки , пошли гнать по каталогам.

В 1 пс это примерно 7 каталогов за 10 секунд.

Они же не выстраиваются в очередь к Вашему сайту :)

а прут и прут :)

Т.е. ни один каталог не думает о том, что помимо него Вы одновременно еще в тысячу добавились, они просто идут и делают свое дело. Это роботы.

А Вы добавляете еще и не один сайт! Вот и кладут сервер.

Если хостинг слабенький, то добавляйте частями. Добавились в 100 каталогов, отдохните какое-то время, потом еще в соточку и т.д.

Ну и вообще уменьшите объемы ЗА РАЗ. Не добавляйте сразу много сайтов, для которых обратки в одном месте лежат.

Это же все просто. Сами проанализируйте ситуацию и все станет ясно.

D
На сайте с 20.05.2001
Offline
297
#9

Лучше переписать скрипт, или уйти с такого хостинга.. :)

B
На сайте с 28.04.2005
Offline
81
#10
shmanci:
абсолютно нормально :)

Это же все просто. Сами проанализируйте ситуацию и все станет ясно.

Это не нормально:)

Мы сейчас не рассматриваем то, что коды ссылок лежат в одном месте.

Регистрация была произведена где то в 400 каталогах (дорегистрация).

Обращения нормальных каталогов для проверки ссылок были. Они берут полностью страницу со ссылками и проверяют robots.txt.

Эти обращения не вызывают вопросов.

Но зачем, например, IP 70.84.24.98 запрашивает страницу katalogi.php 3000 раз (на каждом сайте), каждую секунду в течение часа? При этом читает только первые несколько килобайт.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий