Сталкивался с таким на прошло неделе. Парсил МАГАДАНом около 1000 запросов. В итоге получил бан: страница вордстата не открывалась. Точно бан, ибо с других айпи сайт открывался. Долго искал куда писать что бы разбанили. Так и не нашел. В итоге решил банально подождать. Примерно через сутки с момента бана айпишник разбанился и вордстат снова стал доступен с этого айпи.
Могу предположить следующее. Скорее всего сервер настроен не на количество обращений с конкретного айпи, а на их частоту. Т.е. банально нужно задержку парсинга нужно ставить больше, скажем я ранее гонял с интервалом 3 секунды, но думаю что стоит поднять до 30-60 секунд. Да, стата будет собираться медленнее в десятки раз. Но кто мешает ставить парсинг кеев скажем на ночь, пока спишь. Солдат спит - сбор кеев идёт. При таком раскладе следующим шагом разработчиков программ сборов кеев будет прикрутка к сборщику прокси серверов. Айпишник меняется постоянно, следовательно бана можно не бояться.
Но в принципе яшка может отрганизовать и бан за кол-во обращений в сутки. Ведь для xml это реализовано и успешно работает. Этот вариант хуже предыдущего. Получится с каждого нового айпи собирать кеи по 1000 запросов, потом меняй айпи и гоняй следующую 1000. Неудобно конечно, но придётся на первое время привыкнуть.
Яшку тоже можно понять. Стата нужна всем сеошникам. И чем дальше, тем каждый школьник сеошник. А ведь вордстат придуман не для для сеошников, а для рекламодателей в директе. Что бы они могли собирать статистику по ключам для рекламы. На нас с вами этот сервис не рассчитан, хотя мы им активно пользуемся.
Баны - это первый шаг. Следующим может быть полное закрытие для посторонних, и открытие только для клиентов (кто приносит денежки в клювике). Так же не исключаю варианта платного безлимитного кол-ва запросов с определенного айпи. Пакетные цены. Скажем 1000 обращений - доллар, 5 тыс - 3 доллара и т.д. Так, по мелочам может, лям-другой в день им накапывать - на плюшки и сервера.
Ладно, пожуём увидим. Чего загадывать то? Но не думать об этих перспективах никак нельзя, ИМХО.
Резюмирую.
1. Сайты заходят в индекс нормально. Но есть проблема с сайтами где сразу много страниц оптимизированных пытаешь запхнуть в индекс. Есть пару сайтов с 200-300 страницами. Авторские статьи (строительство, недвижимость). Так вот или берёт страниц 50 и больше не жрёт подлец. Потом по мере взросления сайта от апа к апу добавляет по 5-20 страничек за ап. В итоге сайты скормленные еще в начале января только сейчас зашли в индекс полностью. Видать фильтрик есть типа "дохрена страничек сразу". 10-20 страничные сайты заходят намного шустрее.
2. Внутренняя перелинковка рулит. Но непростая а, "золотая". Грамотная с точки зрения яшки. Сначала загоняем сайт в индекс, потом смотрим релевантные странички и уже с них ссылим на продвигаемую ссылями с нужными анкорами. 4-5 ссылок достаточно. Для НЧ и СЧ предостаточно оптимизации и внутренних ссылок.
3. Внешние ссылки тоже работают, но не намного лучше внутренних. Если удалось выскочить по запросу за счет только внутренних - супер. А если немного не хватает веса - ставим внешки. Сайт начинает лезть в гору и дальше. В гугле внешние работают ощутимо лучше чем в яшке. Толи фильтров у него меньше, толи еще что-то. Всплеска ссылочного оба не любят и наказывают.
4. Посещалка сильно зависит от возраста проекта и страничек в частности. Первая отсечка возраста сайта - 3 месяца, вторая - 6 мес, третья - 9 мес, 4 - 1 год. Что это значит? Запускаем сайт с оптимизированными страничками. И ждём. Вот он проиндексировался. Пошла небольшая посещалка. С проектом ничего не делаем, просто ждём. К концу 3 месяца сайт получит ощутимый рост посещалки. До 30-50%. Что прекрасно видно по статистике установленных счетчиков. Еще через 3 мес сайт получит рост снова. Следующий еще через 3 месяца. И т.д. до 1 года.
5. В данный ап вижу снижение посещаемость практически по всем коммерческим и некомерческим проектам по регионам как Мосава, так и по России в целом. Кроме строительства и дачной тематики разумеется. Снижение более чем солидное до 50% от суточного. Стройка и дача показывают топтание на месте или небольшой рост (который по моему прогнозу только увеличится). Народ выпал из онлайна на дачи, огороды, велосипеды, скейты и ролики. Ничего не поделаешь, пришло лето, а вместе с ним сезон отпусков и снижение посещаемости. Такое продлится до конца августа. Там начнется небольшой рост. Ситуация выправится к середине октября.
6. Для сеошников сейчас мертвый сезон - самое оптимальное время уйти в отпуск.
Топикстартер лгун http://web-kazan.biz/article/2-portfel/17-sajt-dlya-kompanii-zanimayushejsya-prodajej-avtomaticheskih-vorot.html
А все те, кто ему что-то советует (в том числе и я) - лошары.
А вот тут ваще смех... http://web-kazan.biz/ А внизу страницы топикстартер показывает себя с отрицательной стороны. Тут он на коленочках ползает "помогите люди добрые, заказчик всю кровь выпил", а у себя же на сайте - демон и цербер. ЗЫ! Двуликий анус.
Немного цитат с сайта "
Мои плюсы
1. Продвигаю сайты, а не просто говорю, что умею продвигать созданные сайты, в отличие от голословных заявлений. Я в разное время общался с представителями трех веб-студий и все они заявляли, что умеют продвигать сайты. В реальности, ни одна из трех студий продвигать сайты не умела.
4. NEW! При заказе продвижения сайта в поисковых системах по ключевым словам, я создаю вам сайт в подарок (услуга распространяется на сайты в средней ценовой категории до 10000 руб.) цены можете посмотреть в портфолио. У вас появилась возможность получить красивый сайт и сэкономить минимум 10000 руб. на создании сайта. Условием получения сайта в подарок является предоплата за 6 месяцев продвижения сайта по ключевым словам в поисковых системах, на поисковое продвижение даются гарантии, а сайты продвигать в поисковых системах я умею. В подтверждение своих слов можете посмотреть позиции моего сайта в Яндексе и Google по самым конкурентным ключевым, таким как: "Создание сайтов Казань" и "Создание сайтов в Казани". Ну, а если сайт вы продвигать не планируете, тогда придется заказать его за деньги по доступной цене. Вы можете спросить, почему же я делаю, в данном случае бесплатно, хотя ниже я предостерегаю заказывать сайт у того, кто делает дешево! Все просто. Делая вам скидку в виде бонусного сайта, я приобрету клиента, от которого буду иметь постоянную прибыль - от продвижения вашего проекта в поисковых системах.
7. Качественный хостинг и техническая поддержка по обеспечению безопасности сайтов. В последнее время ко мне обращаются люди и жалуются на взломы хостинга и сайтов. Со своей стороны, я предоставляю услугу по технической поддержке и обеспечению безопасности сайтов тем, кто за это платит."
УССАТСЯ СО СМЕХУ! Умелец блин!
1. ТС не знает, что такое переспам ключей. Если на страницу стоят еще и внешние анкорные ссылки, то кол-во вхождение на странице можно уменьшить солидно.
2. ТС не знает что такое ЧПУ. Тому кто для страницы про секционные ворота сделал адрес 2009-11-03-17-07-50.html нужно отрубить руки, а заодно и голову, что бы она не мешала рукам делать своё дело и назвать её sekcionnye-vorota. Но для этого на джумлу нужно ставить ЧПУ подуль, что то типа SEFurls или Artio JoomSef.
3. Про анкорную перелинковку внутри сайта ТС не в курсе. А нужно бы восполнить пробелы знаний. Страниц про ворота много и вес у них неплохой, но вот свой удельный вес они никуда не передают.
4. ТС не умеет пользоваться подзаголовками и считает что если есть тег h1, то других тегов больше не нужно. Его текст выглядит именно как простыня. Ситуацию не спасают картинки внизу текста. Нужно еще картинок добавить именно внутри текста.
5. Добавить на страничку видео. Человек смотрит - время капает. Поисковые факторы в плюс.
6. Выделение в тексте стронгом и курсивом - мифическое влияние на ранжирование.
7. В правой колонке ссылка на http://www.camerussia.com - сквозная. Утекание веса в никуда. Если не критична для заказчика - убрать.
8. Сомневаюсь, что заголовок h1 - "Секционные ворота – от истории к практике" - именно то что нужно. Вряд ли вы двигаетесь по запросу "от истории к практике". Я бы переработал. Хоть "на заказ напишите" или "по низким ценам" или "от производителя".
9. Title в выдаче - Секционные ворота. Для рядового человека - непонятка. Толи описание этого типа ворот, то ли еще что-то. Нужно конкретизировать. А пока титл проигрышный. Ну не будут человеки по такому кликать, или будут кликать с неохотой.
10. По мелочам, но важно. Названия компании нет. Логотипа тоже нет. Человек даже если и позвонит - он не спросит куда попал даже. А куда я попал? По телефонам. В левой колонке они нечитаемы. Их нужно в правый верхний угол, над меню. Вот как тут лого и телефоны так и вам для вашего шаблона нужно сделать http://ekospring.ru.
11. Джумла - зло. 😡
Вот как-то так. Это то что приходит в голову при беглом просмотре.
