Метод, который использовал 10 лет назад:
Создаются страницы или каталоги, запрещенные в robots.txt и ставятся на эти страницы - nofollow ссылки, невидимые пользователям. Все, кто посещает эти страницы - идут в бан :)
Для надежности - можно создать несколько подобных страниц. Посетил 2 в течение X минут - ушел в бан.
Желательно иметь список IP ботов ПС, т.к. они не всегда соблюдают роботс. Или, как минимум, фильтровать по юзерагенту.
netri, вообще о каких примерно суммах идет речь? или объемах групп?
Ситуация один в один была, но только с впс в рег.ру и ссылка МЛ (лежит небольшой сайт, купленный год назад; ссылками вообще не торгую, посему аккаунт МЛ у бывшего владельца).
Удалил :) Вопрос "Вы заблокировали бы по это странной жалобе, если бы был на отдыхе и случайно не заметил письмо?" - рег.ру тупо проигнорировали.
Сменил режим сбора данных - "собирать отмеченные". (Или есть еще возможность переснять позиции?)
Увидел новые возможности в виде +/- позиций:) Спасибо.
Обновляю данные по позициям в поисковых системах.
1) для обновления очищаю поля: "страница в поисковой системе ... " и "позиция ..." и нажимаю сбор позиций. Верно? Или можно как-то собрать новые позиции без очистки?
(бывает капча так часто встречается, что нужно остановить сбор -- новых данных нет, а старые удалены)
2) нет ли какого условия фильтрации - "дата последнего сбора"?
(мне нужно обновить только старые данные о позициях, а не все)
3) планируется ли возможность смены домена и показ позиций для другого домена без повторного сбора позиций, а из сохраненных данных в базе (поисковая выдача)?
(часто в нише 2-3 своих проекта, или нужно посмотреть видимость по конкуренту).
И с наступающим Новым годом. Спасибо за отличную программу.
НС ставятся от cloudflare, или Вы об истории?
Все отлично. Сделку осуществили без гаранта.
Код протекции отправлен. Права администратора получены. Благодарю.
Бронирую группу в ok.ru (194 848 участников).
И начинаю сделку по покупке группы.
Спасибо за возможность выбора месяца для сбора частотностей через Директ.
Опция "за год" - на Директе уже хорошо работает, вроде.
Планируется ли ее включение?