- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Переиграть и победить: как анализировать конкурентов для продвижения сайта
С помощью Ahrefs
Александр Шестаков
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Некоторое время назад написал правила, запрещающие индексировать мои сайты роботам из диапазона IP адресов 109.207.13.0/24. Причиной тому была неимоверная активность пауков, которые пытались каждый день выкачать сайты полностью, что при большом количестве страниц создавало ощутимую нагрузку.
Просматривая сегодня утром логи, обнаружил странные заходы:
46.61.219.35 - - [31/Oct/2013:10:50:40 +0400] "GET /interestingly/ HTTP/1.1" 200 9000 "http://www.yandex.ru" "Opera/9.80 (X11; Linux i686; U; ru) Presto/2.8.131 Version/11.11"
46.61.219.35 - - [31/Oct/2013:10:50:40 +0400] "GET /css/news.css HTTP/1.1" 200 6299 "http://www.yandex.ru" "Opera/9.80 (X11; Linux i686; U; ru) Presto/2.8.131 Version/11.11"
46.61.219.35 - - [31/Oct/2013:10:50:44 +0400] "GET /internet/ HTTP/1.1" 200 8933 "https://www.google.ru" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/534.55.3 (KHTML, like Gecko) Version/5.1.3 Safari/534.53.10"
46.61.219.35 - - [31/Oct/2013:10:50:44 +0400] "GET /css/news.css HTTP/1.1" 200 6299 "https://www.google.ru" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/534.55.3 (KHTML, like Gecko) Version/5.1.3 Safari/534.53.10"
46.61.219.35 - - [31/Oct/2013:10:50:45 +0400] "GET /russia/ HTTP/1.1" 200 9296 "http://www.yandex.ru" "Opera/9.80 (Windows NT 6.0; U; en) Presto/2.8.99 Version/11.10"
Угадайте, кому принадлежит IP адрес 46.61.219.35:
role: JSC Rostelecom Technical Team
address: JSC Rostelecom
address: Russian Federation
Теперь придется терпеть "опыты" нового ПС. Хотя думаю можно отписать к ним в рос кому и сказать, что не хотите индексации сайта, наверняка есть "особые" варианты запрета.
А так обычно на серврах автоматически стоят запреты на такие вот уникумы, иногда даже на яндекс случайно ставят.
Выход: Узнать у комов как запретить под них или постоянно добавлять новые айпи.
Шифруется.
У меня открывается вот такой сайт по этому IP
На сайте разработчика указано
Так что возможно за вами следят.
Форматируйте диски, жгите документы, собирайте вещи и бегите.😂
А кто сказал, что это спутник под этим ip? Для черного списка проверяют сайты.
А кто сказал, что это спутник под этим ip? Для черного списка проверяют сайты.
Подумал, раз у IP дин хозяин "JSC Rostelecom Technical Team", значит и паук один и тот же.
Главное, чтобы не ДДОСил)) а то некоторые ныне мёртвые поисковики так быстро индексировали, что сайты пачками ложились
Также с браузером опера и данной подсети ip приходят. Только в реферрере не морда яндекса, а типа результат выдачи с кеем в виде адреса моего сайта. Но ходят по разу только на новые сайты.
gagarin123, а у Вас какой вопрос-то?
Как из фильма ужасов! Вот оказывается, что бывает с национальными поисковиками.
gagarin123, а у Вас какой вопрос-то?
Возможно, приведенная мной информация будет интересна владельцам сайтов.
Угадайте, кому принадлежит IP адрес 46.61.219.35:
какой-то фейк от вебстудии, которую озвучили выше. смело в бан.
и то спасибо, что хоть "оперой" ходят, а то клоунов хватает, которые под гугль(яндекс)-ботом через адсл ходят или через мобильных операторов.