Анти БОТ

Анти БОТ
Рейтинг
137
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам
Вбиваете айпишник сюда, получаете диапазон. 
https://bgp.tools/
kostyam :
Это страница обнаружена, но не проиндексирована и просканирована, но не проиндексирована. Я сначала думал, что это временно, поэтому просто ждал. Активировал проверки, но они не давали результатов.  Уже прошёл год с создания сайта. Какие-то непонятные причины, как начал, но не закончил. 

Как по мне, Гугл давно уже забил на вебмастеров и их сайты. Гугл вебмастер уже много лет как вообще не обновляется тот же. 

Или через Апи загонять, или закупить себе дофигилиард внешних ссылок.

Александр #:
Всем привет. ПРоблема с отказами на одну запись, то есть по одной ссылке 90% отказов и большое количество заходов около 2000 из-за этого весь ПФ портится на сайте. Как можно запретить доступ на эту страницу? если я удалю запись боты перестанут идти на эту страницу? Закинул в черновик, а по ссылке все равно можно зайти на эту запись. Что можно сделать подскажите.
Подключить Cloudflare и включить проверку всех прямых переходов на эту страницу. Удалять ее не обязательно. В логах вы скорее всего найдете Ростелеком.
Toyvo Glumov #:
Опять началось, прям с НГ, заходы с ПК (по метрике) примерно с 23 часов до 6-7 утра - отказы, при этом роботность низкая. Такое чувство, что работают на постепенное повышение. Пожалуйста поделитесь актуальным списком айпишников для deny в .htaccess,  старые из этой темы уже не работают. В прошлый раз неплохо помогло, настраивал на хостинге чтобы разные .htaccess в разное время суток были, чтобы дневных вообще не трогать и вроде отстали со временем.


Ну и подняли вы тему.

Так скоро еще и до послеобеденных ботов доберемся, и до работающих только на выходные. А там и до профсоюза ботов недалеко.

Откройте файл access в логах хостинга, там все будет. 

Аналогично, поставил пару текстов, оба в топе Яндекса. Писал лично. Человечность 10-30% )
MaddeN #:
UTM метки не мои, определяет как переход по рекламе которой у меня нет

Баньте через htaccess или через клауд.

pilotgta #:

Спасибо за ответ.

Решил после этого коммента проверить свои изображения в интернете, мало ли. и чтоб вы думали?)

на некоторых сайтах нашел изображения со своего сайта и отскриншотенные кадры с  моего ютуб канала)

причем с сайта изображения не стесняясь вставили к себе  прямо с ватермарками где большими буквами написан адрес моего сайта))

что делать? ничего? 

Наймите юристов и опустите их на 10 тыс руб за каждую картинку. Была тут соответствующая тема на форуме.

GasTarbols #:
Все эти AS по прежнему актуальны и спама с них на самом деле идёт много.

Тоже когда-то смотрел этот список. Некоторые сети крутят только ipv6, например IP SERVER LLC. Отключаешь через апи клауда - и сразу жизнь налаживается.

t22 #:
Google очень неповоротливый, это правда. Возвращения позиций можно ждать месяцами, даже если активно обновлять и добавлять странички через Search console 

А ведь были времена, когда было все наоборот.
Сменил домен месяц назад, с редиректом, Яндекс уже через 2 дня в поиске новый вместо старого на тех же позициях стал выдавать.
Заменил недавно ЧПУ в блоге, аналогично, почти мгновенно подхватило изменения.

alexey2 #:
Если это боты, на это нужно вообще обращать внимание и настраивать Cloudflare или вообщем-то вреда сайту это не принесет?

Можно не обращать. Но совсем короткое время. Допустим, неделю, максимум две )
Потому что очень скоро позиции сайта в выдаче Яндекса начнут проседать. И придется обратить внимание.

Так что заниматься нужно уже вчера.

Всего: 1414