firstman,
как вы сможете объяснить то, что я утром пощелкал несколько прокси из выданных мне по списку, по парочке запросов буквально, они были в порядке. После чего я их не трогал, и сейчас попытавшись через них открыть первый же запрос в гугл - получил капчу.
Кто-то получается использует эти IP помимо меня, вне зависимости от того, что они стоят под паролем? Или как это можно еще объяснить?
Сегодня с утра попробовал пройтись по прокси, на текущий момент вроде бы ожили в Гугле, посмотрим, что с ними будет ближе к обеду. Ради интереса не буду их трогать некторое время, может снимутся накиданные на них прежними пользователями санкции.
Но вообще нехорошо конечно, у меня второй пул уже накрутил по 5400 раз каждая прокся, по минимум 5-7 запросов на каждую. Итого 270000 запросов на 10 прокси, и не было никогда даже капчи.
Решил взять сегодня прокси в дополнение к еще действующим, еще посомневался, может стоить взять тестовые seo proxy-5, но поминая успешный опыт работы год назад с глобателом - решил что не стоит. Взял сразу требуемые 10, на которые нет тестового периода.
В общем как оказалось зря, жопа не зря чуяла, все прокси оказались уже с капчей на гугл. Заказал 10 - не пошли сразу вообще, еще 10 обновили по тикету - по 1 запросу и привет капча. Как сказали в саппорте - капча не бан :), это конечно понятно, но теперь надо думать как ее сбросить и не уверен, что после сброса эти IP еще кто-то не юзает.
Деньги не возвращают по оферте, да и даже если был возврат - заморочен до ужаса. В общем неприятно вышло, обидно за 30 баксов. В лучшем случае - попробовать вытащить из капчи, если получится, гемор в итоге приличный.
ЗЫ: ситуация немного абсурдна, если юзать свежий браузер и прокси - то капча не вылезает, если старый браузер или через скрипт - вылезает. С другими сео-прокси, от другой конторы, такой траблы нет. Может кто подскажет как эту бяку обойти, раз саппорт не может помочь.
Занимался такой же проблемой на своем статейном сайте. Белый лист для IP поисковых ботов - самое оно, хоть и муторно это. Всех остальных, при очень высокой активности - в бан.
Ну или стандартная уловка со ссылкой-ловушкой. Таким образом сразу отделите ботов-парсеров от юзеров, а затем уж по ботам пройтись и сверив IP с белыми - отсечь всех ненужных.
Скажу так, в среднем на статейнике я отшивал ежедневно не менее 5-8 IP, причем средствами apache ) Правда к этому счастью пришлось сделать маленький скрипт на bash, который в случае бана по IP пользователя с юзерагентом поисковых систем - сообщал мне об этом на телефон. И тогда я шустренько лез на сервак и проверял - этот IP правда принадлежит ПС, или нет. Если да - в белый лист, если нет - оставлял в бане.
ПС, не знаю как последнее время - не так часто меняют IP диапазоны своих ботов, а для некоторых сразу масками делал - и все, никаких проблем.
Лично меня спасало.
MeToGame,
сервер работает нестабильно? Причина какая для его проверки? Как посоветовали выше - можете обратиться в ДЦ и описать проблему, они проверят, тем более, если вы у них его арендуете - это их задача.
Если для себя и на любительском уровне - в сети полным полно разных программ под разные операционные системы для проверки основных узлов компьютера и удаленной диагностики.
Обычно для таких вещей на сайты ставят публичную статистику или с возможностью гостевого просмотра по нужным параметрам. Если этого нет - то вполне возможно, что менеджер темнит с посещаемостью.
Как альтернатива - обсудите возможность тестовой рекламы на 1-2 дня за недорого, и посмотрите эффективность площадки уже со своей стороны.
По поводу сторонних сервисов: определить точную посещаемость сайта практически невозможно, если владелец сайта не позволит. Все цифры будут крайне теоретическими.
Начните с простейших тестов:
Вместо index.php подкиньте файлик отображающий phpinfo(); получите результат, сверьте необходимые версии php и возможно установленных модулей.
Дальше можете подкинуть простенький пример .htaccess, с каким-нить простеньким редиректом и проверьте его работу.
Так будет понятнее, в чем же проблема, для начала. С php или htaccess.
Я где-то сказал, что он хуже или не востребован? Чистый nginx сложнее в настройке для большинства пользователей, а при том, что там планируется не один сайт - автор погрязнет со своими знаниями в настройке и преобразовании. Не забывайте, что обработку htaccess, rewrite - не все могут их сконвертировать под чистый nginx или просто выбросить. И чем больше разных проектов на одном сервере - тем это будет сложнее. Соответственно nginx+apache с настройкой будет по эффективности высок, и по настройке довольно прост, без постоянных проблем преобразований уже готовых htaccess разных CMS под nginx+php-fpm. Мы рассматриваем конкретный случай, ответ соответствующий.
Ответ касается и вашего комментария, хотя признаю, немного резковато выразился, без пояснения :)
Вам уже дали ответ, даже практический. И не только я. Остальное - оффтоп.
Советую обратить внимание на http://www.instantcms.ru/
Вполне неплохой движок для ваших целей, я правда подпиливал всякие мелочи-глюки-баги, но функционал из коробки + модули заслуживает внимания. К ней идет хороший, правда платный модуль биллинга, то есть она решает почти все ваши задачи. У меня сайт на ней похожей направленности работает, как раз небольшая социальная тематичная сеть. По нагрузке спокойно справится на слабенькой дешевой vds.
