Полная копия сайта, автограббер, что делать?

U
На сайте с 02.11.2009
Offline
74
14193

Обнаружил полную копию сайта на другом домене. Публикации на этом сайте появляются автоматически, сразу же после их появления у меня. Есть несколько интересных нюансов:

- графика не импортируется на чужой хост. Ссылки на всю графику всегда с сайта-оригинала.

- сайт-копия получает трафик, причем не связанный с моим контентом и моим трафиком, хотя тематика общая. Это видно по метрике, код которой тоже остается на сайте-копии.

- нагуглил целую сеть таких сайтов http://domainbigdata.com/email/e5y78hurdvcbyr537hjkps@mail.ru Все они сделаны по одной формуле, описанной выше. Оригинальный сайт можно узнать по урлу с любой картинки в любом посте.

Главный вопрос: как от этого защитится? Или хотя бы усложнить жизнь тому, кто создает такие копии?

Я пробовал блокировать IP хоста в htaccess, но результата не дало.

Буду благодарен за советы.

C
На сайте с 18.03.2008
Offline
107
#1
untee:
- графика не импортируется на чужой хост. Ссылки на всю графику всегда с сайта-оригинала.

Попробуйте настроить защиту от "горячих ссылок" (хотлинк). Она не позволит вставлять ссылочки на ваши картинки на других сайтах. Они там просто не будут показываться.

untee:
Я пробовал блокировать IP хоста в htaccess, но результата не дало.
Буду благодарен за советы.

Скорее всего парсят с другого хоста. Этот хост может быть на соседних IP адресах. Если не ждёте в качестве посетителей своего сайта серверы из дата-центра, то можно заблокировать всю подсеть, куда попадает IP адрес этого сервера/хостинга. И сразу проверяйте помогло или нет.

mnogobyte.ru (https://mnogobyte.ru) - Colocation, dedicated, толстые каналы ZeroCDN.com (http://zerocdn.com) - 78 000 за 10Гбит/сек
auditsaitov001
На сайте с 28.06.2015
Offline
11
#2

Если знаете ип граббера - сделайте для него редирект на порносайт :)

Вот будет веселое зеркало.....:)

И антилич (защита от хотлинка) поставьте - отличная вещь.

Аудит безопасности Вашего сайта квалифицированным специалистом по иб. Ручная проверка кода на уязвимости, поиск вирусов, вебшеллов и проч. Полная проверка, а не простое удаление вирусов.
K
На сайте с 28.06.2009
Offline
52
#3

Скорей всего на сервере стоит скрипт, который парсит сайт и заменяет внутренние ссылки на свои. И происходит это в момент обращения страницы на клоне сайта. При этом, не всегда айпишник сайта совпадает с айпи парсера.

Но есть выход ☝

Ищем какую-нибудь не популярную страничку на своём сайте, меняем своё имя домена на имя домена клона и загружаем в браузере пару раз, при этом запоминаем время обращения к данной странице (для упрощения поиска в логе).

Например, http://site-klon.com/cat/3647463.html

Сразу же окрываем лог апача access.log и ищем поиском фразу "3647463.html"

Будет что-то вроде этого:

109.187.17.21 - - [03/Nov/2015:12:04:31 +0200] "GET /cat/3647463.html

Это и есть айпи парсера. После чего блокируем этот айпишник в .htaccess:

Order Allow,Deny

Allow from All

Deny from 109.187.17.21

Или же можно редиректнуть негодяя-клона на какой-нибудь xxx сайт:

RewriteEngine on

RewriteCond %{REMOTE_ADDR} (109.187.17.21)

RewriteRule .* http://www.плохойсайт.ру/ [R=301,L]

S
На сайте с 31.07.2009
Offline
162
#4

Как-то появилось несколько сайтов, которые каким-то образом отдавали гуглу мой контент, как свой. Помню что зашел в гугл вебмастер, как вебмастер этих сайтов, подтвердил права на сайты , и удалил их из выдачи, плюс поставил регион австралия, и самую медленную индексацию.

Для подтверждения, файлик разместил на своем сайте, и этого оказалось достаточно, чтоб гугл посчитал что те сайты мои..

BS
На сайте с 03.09.2013
Offline
28
#5
superf:
Для подтверждения, файлик разместил на своем сайте, и этого оказалось достаточно, чтоб гугл посчитал что те сайты мои..

Не пробовали таким же образом свой блок адсенса повесить на те сайты? ;)

DV
На сайте с 01.05.2010
Offline
644
#6
auditsaitov001:
Если знаете ип граббера - сделайте для него редирект на порносайт
Вот будет веселое зеркало...

Я бы наладил клоакинг, отдавал бы грабберу голые жопы.

Кстати, можно ведь и для своих целей использовать явление. Отдавать, к примеру, нужный вам текст, выводить его в топ согласно своей хотелке. Тут надо подумать, чего такого хочется…

VDS хостинг ( http://clck.ru/0u97l ) Нет нерешаемых задач ( https://searchengines.guru/ru/forum/806725 ) | Перенос сайтов на Drupal 7 с любых CMS. ( https://searchengines.guru/ru/forum/531842/page6#comment_10504844 )
SeVlad
На сайте с 03.11.2008
Offline
1609
#7
superf:
каким-то образом отдавали гуглу мой контент, как свой

Только контент или и.. хедер например?

superf:
подтвердил права на сайты

Каким образом?

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.
S
На сайте с 31.07.2009
Offline
162
#8
Только контент или и.. хедер например?

- все полностью, у меня сайт на битриксе, в модуле вебаналитика, я увидел, что при индексации гуглем, роботу подставляется другой сайт в зоне СС , при поиске-открывался тот сайт , потом на том сайте всплывало окно, что введите свой номер телефона.

Права на сайт подтвердил стандартно, как гугл хотел, гугл сформировал файлик для подтверждения, я его разместил на своем сайте и все.

С моего сайта все тянули, как-то в запросы вписывая свой сайт ( я не программист, не знаю как) .

В то время таким образом вышел из положения.

SeVlad
На сайте с 03.11.2008
Offline
1609
#9
superf:
Права на сайт подтвердил стандартно, как гугл хотел, гугл сформировал файлик для подтверждения, я его разместил на своем сайте и все.

Файлик на твоём домене не подтвердит права на другой.

Единственный вариант возможного подтверждения - если подтверждение в хидере, и его тянет граббер. Но это маловероятно. Грабберам просто незачем тянуть этот мусор.

Такшта.. это всё сильно смахивает на сказку.

S
На сайте с 31.07.2009
Offline
162
#10
Такшта.. это всё сильно смахивает на сказку.

-я настаивать не буду, написал как дело было, сам бы не поверил. Я вам в личку скриншоты того что сохранилось по тому случаю сбросил, может сможете углядеть в них как тянулось. Сайт свой светить не хочу, поэтому в личку отправил то что сохранилось с того времени.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий