skady

skady
Рейтинг
71
Регистрация
28.02.2006

I++ - я не знаю в чем причина - но у меня так работало.

я пользовался библиотекой PHP для запроса по http/post с Google. В какой-то момент увидел что поток данных прекратился - поставил PHPoxy на сервер и зашел через него на google.com. Увидел капчу - ввёл её - и дальше снова ботом беспрепятственно использовал Google Translate.

Возможно в разных сервисах разные правила.

izbushka:
Учитывая, что автоматические запросы запрещены гуглом, как он отреагирует при не большом их кол-ве (до 50-100 в день (каждый день, регулярно), но за небольшой промежуток времени)? Цель собирать статистику положения сайта в серпе по определенным ключевикам.

Раскидывайте запросы по времени и проблем никаких не будет.

Когда Google начинает подозревать что вы робот - он для начала дает вам капчу. В этот момент вы сами можете зайти на Google (через прокси на хостинге конечно) и ввести капчу для разблокирования.

Из опыта работы в Google Translate:

- при частых запросах (более 1000 с паузой 3-5 секунд) - дает капчу. После ввода капчи можно ещё несколько сотен ))

- при частых запросов с периодом - бана нет. Сделал около 30 000 запросов в течение месяца с паузой от 40 секунд и больше.

На сайте на Mchost трафик за сегодня (по данным LI)

Россия 339 68.1% 1,659 69.9% 1,578 67.4% 1,582 68.0%

Украина 59 11.8% 257 10.8% 257 11.0% 277 11.9%

Белоруссия 37 7.4% 157 6.6% 169 7.2% 175 7.5%

Казахстан 20 4.0% 117 4.9% 116 5.0% 109 4.7%

Узбекистан 11 2.2% 43 1.8% 47 2.0% 44 1.9%

Германия 7 1.4% 22 0.9% 18 0.7% 19 0.8%

Латвия 4 0.8% 14 0.6% 9 0.4% 7.3 0.3%

США 4 0.8% 10 0.4% 15 0.6% 13 0.6%

Молдавия 3 0.6% 13 0.5% 15 0.6% 16 0.7%

Другие 3 0.6% 11 0.5% 17 0.7% 17 0.7%

Греция 2 0.4% 6 0.3% 3 0.1% 2.3 0.1%

Киргизия 1 0.2% 7 0.3% 8.2 0.4% 7.7 0.3%

Эстония 1 0.2% 6 0.3% 5.5 0.2% 6.6 0.3%

Европа 1 0.2% 6 0.3% 3.8 0.2% 4.4 0.2%

Швеция 1 0.2% 5 0.2% 4.8 0.2% 6.9 0.3%

Азербайджан 1 0.2% 4 0.2% 0.75 0.0% 1.7 0.1%

Израиль 1 0.2% 3 0.1% 2.2 0.1% 3.4 0.1%

Канада 1 0.2% 1 0.0% 1.5 0.1% 1.3 0.1%

Бразилия 1 0.2% 0 0.0% 1.5 0.1% 0.29 0.0%

http://www.liveinternet.ru/stat/dotapick.ru/countries.html

Зарубежный трафик на месте.

Пользуюсь McHost, тариф Vip-1

Основной сайт стабильно тянет 2500 уников и 25 000 - 30 000 визитов в сутки. В моменты пика до 4000 уников и 35000-40000 визитов.

До этого 2 раза выгоняли с других хостингов за перегрузку (стоимость незначительно отличалась) - этим хостингом доволен.

Из недостатков:

- странная техническая поддержка. Один раз была весёлая история. Всё время пользовался ssh и всё было замечательно. Только не работали некоторые программы типа Midnight Commander - не было прав даже на чтение к каталогу с программами. И вот в одни день пытаюсь зайти - стучусь раз 10 чтобы подмонтировать диск через ssh - и безрезультатно - после авторизации соединение слетает.

Написал в техподдержку - мне объяснили что ВСЕМ ОТКЛЮЧИЛИ ssh ради безопасности. После моего объяснения зачем мне нужен ssh всё заработало. Захожу через ssh, запускаю mc (запустилась!) и вижу классную картину - у меня доступ ДО ВСЕХ САЙТОВ на хостинге. Рисковать не стал открывшимися возможностями - сразу написал в техподдержку. Перезахожу по ssh - mc не запускается. В обзоре чужих сайтов нет )). Пишу в техподдержку - прошу включить mc и получаю ответ - "в таком режиме доступа включение mc невозможно" :)

Другой случай был когда мне надо было скопировать БД MySQL из кодировки cp1251. Скопировать через PHPMyAdmin было нельзя ибо база 250 Мб. Дамп базы сохранился прекрасно, но вот раскрыть через mysql не получалось (он ждёт utf8 на вход) перекодировать через iconv не получилось - потому как доступа до iconv не было (см.выше) :). В общем может просто квалификации не хватило. В итоге 3 дня писал в техподдержку чтобы базу скопировали базу данных, услышал от них кучу вопросов почему я сам не могу это сделать и только потом мне помогли. Хотя вся работа сводилась к копированию 1 файла.

- периодически сайт тормозит или подвисает. Или базы данных отваливаются. К чести McHost это происходит редко или очень редко - за последние 4 месяца сайт совсем не работал в общей совокупности 2-3 часа.

В общем и целом я очень доволен. Кстатит у них есть партнёрка - http://mchost.ru/module-actions/actions-11/page-44.html (40% с услуг) - так что если хотите потратить долларов 200 на них, то пишите ПС - попробуем получить с них денег и сделать вам скидку :) Если McHost за это не накажет ;)

dmitry_bublikov:

Сейчас пишу кеш... А пока за 9 дней 13гиг трафика сожрали из 30 🙅 (провайдер на ушах 🚬)

В чем основная проблема?

- в загрузке MySQL

- в загрузке процессора

- в объеме трафика?

Оптимизацией MySQL вы вряд ли снизите трафик. Чтобы снижать трафик подойдёт например:

- zip-ние отдаваемых html-документов (но надо иметь резерв загрузки процессора)

- перенос части картинок на внешний хостинг с анлимом. Что-нибудь очень простое - можно зарубежный хостинг за 2-3 доллара в месяц и парой Гб места

Botofas - есть 2 варианта:

1) скидки от объёма - действуют для всех - http://advertising.yandex.ru/discount.xml . Скидки начинаются со 150 000 в год

2) скидки дилеров. Дилер получает вознаграждение за работу с вами в виде процента от оборота. Забрать эти проценты не получится - но вот уговорить дилера предоставлять дополнительные услуги можно.

В любом случае - если у вас бюджет меньше 100 000 в год, то скидки получить сложновато. Если больше 10 000 000 в год - то карты вам в руки - идите в Яндекс и трясите с них скидки :)

Если взять несколько тематических сайтов по 1 теме, то они как правило очень плотно перелинкованы. У меня в тематике сайта около 9 конкурентов. Если проверить количество ссылок с одного из сайтов на другой - то обычно от 10-20 до 100-200 ссылок (с форумов в основном). Не пессимизировать же всех? :)

Более того - скажу - с точки зрения поисковой системы выгодней высоко ранжировать именно эти 10 перелинкованных сайтов, чем 1 "выскочку", который не ссылается на эти сайты и на который не ссылаются.

В беках показываются. Страницы обычно с нулевым PR.

Ждать большого эффекта не приходится - ни в плане посетителей, ни ТиЦ/PR. Но вероятно польза есть. От форумов и правда не сильно отличается )). Разве что не забанят за спам.

Кстати иногда со StumbleUpon начинают валить посетители - до 50-100 в день на русскоязычный сайт.

Обменялся со Stryker - и другим рекомендую.

Angel Амурский:
www.dmoz.org/World/Russian/Покупки/Доски_объявлений/Бесплатные/, проанализировал - ТИЦ 600, ПР 0.

Странно - откуда там ТиЦ 600? Эта страница (или подраздел) включена в ЯК отдельно? Вообще ТиЦ DMOZ - 5400

Всего: 396