bonzaza

bonzaza
Рейтинг
82
Регистрация
10.06.2006
Должность
фриланс
Интересы
разработка
жизнелюб в третьем поколении
stealthy:

Судя по логам, робот (H) запрашивает данные по протоколу HTTP/1.1?

посмотрел на разгоревшийся флейм по поводу кеширования, тему топикстартера и хотелось бы задать уточняющий вопрос - а при чем тут индексатор ?

ИМХО зеркальщик обходит сайт и ищет ссылки для склевания

а запрашивает повторно, чтобы точно быть уверенным, что страница отдается и так и так (не все же gzip поддерживают)

strekov:
Читай, исправляй, жди!

тут точно копирайт ставить надо и сделать лозунгом начинающих (и не только) SEO оптимизаторов ☝

а по поводу бана топикстартер вы расстраиваетесь зря - есть еще шансы все вернуть при использовании вышеуказанного совета (это вам не вечный бан)

если даже и даст какой-либо эффект - то очень незначительный

навредит - врядли, если конечно в рамках разумного

ИМХО - сделайте так, чтобы было удобно и комфортно пользователям

10 греев

догнал бы PR до 10 - а то не солидно как-то :)

загляните сюда

на русском правда не нашел

вот - рекомендую

сразу снимет все вопросы ☝

1. теоретически если есть полный доступ к системе (т.е. root доступ со всеми вытекающими) то можно попробовать через iptables (или другие файерволы) разрешать опеределенное количество подключений по определенному свойству пакета либо ip адресу. подробнее можно попробовать на opennet.ru или netfilter.org

2. средствами веб сервера - не встречал (но можно попросить написать модуль на заказ например на apachedev.ru)

3. самый простой вариант - написать им в суппорт с вопросом, что делать (думаю что писали :))

ИМХО ответить на этот вопрос практически невозможно - все зависит от:

1. OS

2. Веб сервер + количество + его конфигурация (однопоточный, многопоточный) + с чем идет в поставке

3. Сервер баз данных + количество + его конфигурация

4. Для чего это все используется (хостинг, веб ресурс)

5. Как все прооптимизировано

у меня было на похожей конфигурации (Xeon 2 шт 1G оперативки)

OS linux 2.6.18 SMP сборка

Web Server Apache 2.2 с MPM worker + mod_security (вкомпиленный) + php 5 (модулем)

DB MySQL 5.0 на движке innodb (myisam отказался)

средний loadaverage не поднимался выше 5 - за сутки был примерно 1.0

но сразу хочу отметить, что процессорное время елось не только перечисленным но и другими приблудами, облегчавшими работу :)

из положительного:

- все по делу

- порадовал скриншот :)

отрицательное:

- что-то не то с количеством внешних и внутренних ссылок или я не правильно понял

Всего ссылок - 179

Локальных ссылок - 178

Внешних уникальных ссылок - 22

- и еще что-то с тиц (хотя у меня 450)

Индекс цитирования (Yandex) - 0

а так ничего даже - респект :)

ИМХО ничем не грозит - всеже внешние факторы :)

сории за оффтоп: а вы уверены, что спамят - может проект начал набирать популярность? или активная часть посетителей сайта решила привлечь больше игроков, чтоб интереснее было ☝

Всего: 338