Что за бот звереет - CJB.NET Proxy

G
На сайте с 27.11.2003
Offline
31
1253

Последнее время разгулялся не на шутку, на некоторых сайтах до 70% трафика на него приходится, особенно на новых. Якобы веб-прокси, а на самом деле их бот создает зеркала всех сайтов подряд, например searchengines.ru.proxy.cjb.net или можете любой из своих доменов подставить. Но еще хуже то, что эти зеркала вылазят в гугле выше оригиналов, что вполне естественно, домену то лет сто.

arlean.com (arlean.com) - The oldest WAP PPC SE mavpa.com (mavpa.com) - источник бесплатного трафика
A1
На сайте с 11.01.2006
Offline
46
#1
goldenbull:
Последнее время разгулялся не на шутку, на некоторых сайтах до 70% трафика на него приходится, особенно на новых. Якобы веб-прокси, а на самом деле их бот создает зеркала всех сайтов подряд, например searchengines.ru.proxy.cjb.net или можете любой из своих доменов подставить. Но еще хуже то, что эти зеркала вылазят в гугле выше оригиналов, что вполне естественно, домену то лет сто.

это скрипт, который просто загружает страницу, указанную до ".proxy.cjb.net". Информацию не хранит. Попробовал изменить сайт, а потмо сразу же открыл его по <адрес>.proxy.cjb.net - изменения сразу же отобразились.

Посмотрите, на <ваш сайт>.proxy.cjb.net есть внешние ссылки в гугле и яндексе?

G
На сайте с 27.11.2003
Offline
31
#2

Это понятно, но если бы все так просто, было бы нечего обсуждать. Их бот выжирает страницы сотнями в день на сайтах, где из трафика пока одни боты и никаких ссылок быть не может, так как сайтам несколько дней от роду. Естественно прокси там есть http://proxy.cjb.net и он рабочий, потому у вас страница и обновилась, но это маскировка для трафика, который генерируется ботом, а не пользователями прокси. Вопросы по мылу они игнорируют, в гугле нашел еще несколько похожих проблем у людей, когда зеркала на cjb.net в выдаче забивали оригинал.

M
На сайте с 20.11.2005
Offline
37
#3

Забаньте подсеть бота, да и делов

Бесплатный мониторинг позиций Y,G,R seorun.ru (http://seorun.ru)
G
На сайте с 27.11.2003
Offline
31
#4

Это и собирался сделать, напрягает необходимость банить на каждом втором сайте, да и трафик какой-никакой идет из того же гугля через эти зеркала. В частности на забененные гуглем домены. Может он не столько бэд, сколько гуд, вот в чем вопрос.

M
На сайте с 20.11.2005
Offline
37
#5

Как ни крути, а это получается дублирование контента, и как следствие уменшение его ценности, подумайте над этим.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий