Блок RSS.xml для всех кроме поисковиков

WinZiPPeR
На сайте с 22.07.2019
Offline
33
275

Всем привет! Сразу к делу. У меня есть проблема - меня парсят не понятно как, с главной убирал, с категорий тоже - все бестолку. Единственная моя догадка это то, что парсинг осуществляется через RSS канал сайта.

Хотел бы заблокировать доступ к RSS.xml для всех кроме поисковиков через .htaccess или каким либо другим методом. Поможет кто?)))

Без рекламы - вредитель you-guide.ru (модеры если хотите, удалите ссылку).

Отличная ПП с хорошим заработком - https://bit.ly/47Im7Cc ; По поводу закона о рекламе, они все делают сами.
V
На сайте с 26.09.2010
Offline
93
#1
Парсеры легко могут притвориться поисковиком. Попробуйте что-то около cloudflare.
L7
На сайте с 23.04.2005
Offline
207
#2
RSS фид людьми же используется, если вы его забаните от всех, кроме поисковиков, то он, по сути, просто потеряет свою функцию. А поисковики и без него прекрасно все индексируют, проще просто убить RSS целиком да и все, если вам нет дела до людей, которые были подписаны по RSS.
Проверка добытых беклинков, мастхэв для сеошников ( https://prozavr.ru/ ) | Массовая проверка Яндекс ИКС ( https://prozavr.ru/tools/massovaya_proverka_iks.php ) | Скачивалка фото из ВК и Пинтереста ( https://prozavr.ru/tools/parser_kartinok.php ), для получения тонн картинок для ваших проектов.
Алеандр
На сайте с 08.12.2010
Offline
207
#3
WinZiPPeR :
У меня есть проблема - меня парсят не понятно как, с главной убирал, с категорий тоже - все бестолку
Какой бы ни был контент и как не выкладывался - при желании его можно скопировать. Нельзя скопировать только то, что вы не выкладываете. Не стоит тратить время на эту мнимую "защиту" контента.
F
На сайте с 12.05.2021
Offline
9
#4
РСС это для людей, причем они в основном запросы будут делать ботовые (рсс ридерами), потому клаудфларом не пофильтруешь на ней, поисковикам не нужна ваша лента, в общем удаляйте ее полностью.
Рекомендую антибота https://antibot.cloud/ru.html он защищает от накрутки поведенческих, парсинга контента и не только.
WinZiPPeR
На сайте с 22.07.2019
Offline
33
#5
Алеандр #:
Какой бы ни был контент и как не выкладывался - при желании его можно скопировать. Нельзя скопировать только то, что вы не выкладываете. Не стоит тратить время на эту мнимую "защиту" контента.

У меня из-за этого вредителя сайт падает на дно. Тупо клон всего что есть и сраная Яша не хочет ни чего делать. 

Поясню, у меня даже старый материал отлетает из поиска, стоит ему с копировать.

WinZiPPeR
На сайте с 22.07.2019
Offline
33
#6
LDA777 #:
RSS фид людьми же используется, если вы его забаните от всех, кроме поисковиков, то он, по сути, просто потеряет свою функцию. А поисковики и без него прекрасно все индексируют, проще просто убить RSS целиком да и все, если вам нет дела до людей, которые были подписаны по RSS.

у меня нет подписки на RSS.

WinZiPPeR
На сайте с 22.07.2019
Offline
33
#7
vipvie #:
Парсеры легко могут притвориться поисковиком. Попробуйте что-то около cloudflare.

У меня и так он есть. НИ чего не помогает.

N5
На сайте с 14.12.2018
Offline
51
#8
WinZiPPeR #:

У меня и так он есть. НИ чего не помогает.

И не поможет, захотят своровать - своруют в любом случае

W1
На сайте с 22.01.2021
Offline
306
#9
WinZiPPeR #:

у меня нет подписки на RSS.

Ну так и удалите RSS.

Мой форум - https://webinfo.guru –Там я всегда на связи
WinZiPPeR
На сайте с 22.07.2019
Offline
33
#10
noob58 #:

И не поможет, захотят своровать - своруют в любом случае

Проблема в том, что мой ресурс улетает в дно, и на его место встает сраный дорвей. Ничего не помогает, я задолбася уже.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий