softerra

Openso #:

Но подумал тут ещё, что когда дорами баловался, то использовал а-парсер и теперь захотелось ещё всякую дичь типа парсеров забанить, по поиск по гуглу ничего не выдал. Вот и решил здесь спросить актуальный список может у кого есть?

Openso #:

Да уже 30 страниц пролистал, немного утомился. Боюсь ещё 40 страниц срача о том кто лучший сеошник не осилю

Openso #:
Повторюсь -  подскажите, пожалуйста, актуальный список для блокировки всяких парсеров и краулеров для robots или  htaccess?

юни #:
Я не думаю, что вообще технически реально определить, под статическим или динамическим адресом работает пользователь. Если только напрямую у провайдера.

Рамиль #:
Разработчик Антибота посоветовал блокировать таким доступ к сайту и добавить в правила.

Сергей #:

Юморист. У ботоводов целые мобильные фермы работают. МТС, Мегафон тоже заблочил?

юни #:
А как Вы отличаете статику от динамики?

GuruSite24 #:

Удачи в экспериментах. Там куча реальных посетителей.
Потом расскажите что из этого вышло.

Чуть что, сервис что на скрине все айпишники показывает как статические. Даже мой динамический айпишник, что дал мобильный оператор.

GuruSite24 #:

Ну я бы не преподносил свой частный случай как истину в последней инстанции.
Вот общее количество запросов из подсети мегафона по одному из сайтов за сутки. Даже если на 4 разделить (/favicon это капча), то все равно получается 800 с лишним уникальных запросов.

xsignes #:

Аналогично забанил все ботные подсети. С 30% прямых заходов осталось где-то ~5%, за месяц никак не отразилось на конверсиях, процент отказов существенно снизился, позиции чуть подросли.