truebusiness

Возможно я отстал от последних модных штук. Раньше увлекался доргенами было давно правда, доры всегда любили закрывать по IP, также отрубался весь прокси трафик. Можно было чужие доры изучить только через юзер агент поисковых систем например (но не всегда, т.к. отпечатки так подсвечиваются), либо через резидентские/мобильные прокси по ГЕО дора.

Много сервисов для клоакинга есть, которые определяют прокси трафик ipv4/ipv6, им можно запрещать попадать на сайт, вычислять так подсети и блокировать их.

Сервисов для проверки отпечатков браузера много. Прокси подключение скрыть трудно, fingerprint будет подсвечиваться.

Как вычислять такой трафик - уже техническая задача.

Коллеги, подскажите. Разве ipv4/ipv6 адреса не будут подсвечиваться как прокси? И в теории можно легко вычислять и блокировать прокси трафик.

Но с мобильными/резидентскими сетями сложней - они предоставляют ссылки на смену IP, и у мобильных операторов IP часто один и тот же в рамках подсети.

Торговля драгс/жопы для меня не приемлемо тоже законно/морально. Но когда речь про казино - люди ищут казино в интернете, где хотят поиграть. А вы им даете эту инфу, вы же не рекламируете им казино, вы помогаете им найти нужную информацию.

" Заработок для падальщиков" - почему такой негатив? При продвижении SEO сайта вы же не рекламируете "заработок на казино" или что то в этом роде. Вы делаете ревью казино или продвигаете бренд казино, т.е. то что люди сами ищут в поиске.

Не нужно закрывать. В индекс попадают html страницы, а не json. Боты 1 раз пройдут по ссылкам и забудут про них.

Точно как не подскажу. Но можно настроить сервер или хостинг, чтобы на левом домена не грузилась картинка через ваш хостинг. Посмотрите гайды в интернете.

Спасибо большое коллеги за ответы! Для себя сделал вывод, что буду ориентироваться на точную частоту ключей, и смотреть при этом частоту кластера (сумма точной частоты всех запросов в одном кластере).

Не знаю, насколько технический это возможно. Это все равно если спрашивать, как закрыть часть текста на странице от индексации. Может выведете картинки через сложный javascript, и они не будут видны поисковым роботам.

Можете положить сграбленные картинки в определенную папку. Далее закрыть эту папку от индексации через robots.txt. Но тогда страница не будет корректно отображаться у ПС.

Вообщем вопрос ваш не корректный.

Update по сайту. Пока все печально. Из Яндекс все вылетело на позиции 60+, в Google тоже самое. Иногда на сайт заходит 1 человек в день с поисковых систем (заходят с Google, с Яндекс за все время не одного посетителя не пришло, что очень странно).

Я подожду месяц еще. Если ситуация не поменяется - хочу поменять кардинально структуру сайта.