- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Зачем быть уникальным в мире, где все можно скопировать
Почему так важна уникальность текста и как она влияет на SEO
Ingate Organic
VK приобрела 70% в структуре компании-разработчика red_mad_robot
Которая участвовала в создании RuStore
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Yandex/1.01.001 (compatible; Win16; i) - буковка i в нижнем регистре.
в отличие от обычного индексера
Yandex/1.01.001 (compatible; Win16; I)
Причем ходит с яндексового ипа на забаненый яндексом же сайт.
Другие пауки с этого ипа не ходят.
Это что, индикатор бана? ;)
Пару дней назад тоже заметил заход такого же юзерагент.
Помню, год или два назад один раз такой же странный робот заходил на сайт. Это как раз тогда, когда месяц Яндекс вообще никакие сайты не индексировал, что тогда совпало с проведением конкурса по поиску в интернете.
Также обратил внимание, что в тот же день (пару дней назад) заходил робот JamesBond. Вроде давно уже не было такого.
Что, Яндекс опять начал эксперименты с ботами?
А что в whois у IP написано? Может шалит кто-то? :)
Может шалит кто-то?
На IP адрес не обратил внимания. Честно говоря, у меня тоже первым делом возникло подозрение, что кто-то шалит. :)
Только смысл в такой шалости какой?
Ну, да придурков всяких хватает...
На IP адрес не обратил внимания.
Посмотрите IP, если 83.222.4.47 и маскируется под Яндекс, то это каталожный бот но не Яндексовский а каталога обмена ссылками. Люди над ним ломали голову месяца 2 назад. Но потом даже создатель каталога объявился и немного посмеялся над всеми :)
А что в whois у IP написано? Может шалит кто-то? :)
На шалости не похоже, ип аутентичный: 213.180.207.224
inetnum: 213.180.206.0 - 213.180.207.255
netname: YANDEX-BIGSEARCH2
descr: Yandex search engine
Кстати, на своих посещаемых и ангельски непорочных сайтах за последнюю неделю я этого бота не заметил. Но на забаненом сайте появляется регулярно, берет robots.txt, страницу из глубины сайта и сваливает.
Может быть это отдельный индексер для забаненых сайтов, который проверяет не сменился ли контент?
Может быть это отдельный индексер для забаненых сайтов, который проверяет не сменился ли контент?
Ага, а если контент сменился - сразу разбанивает. :)
берет robots.txt, страницу из глубины сайта и сваливает.
А вот страница из глубин вашего сайта чем-нибудь характерна? Можно в личку сайт и "глубинную страницу"?
А вот страница из глубин вашего сайта чем-нибудь характерна?
Хороший вопрос. На первый взгляд обычная страница, каких довольно много на том же сайте. Но на второй взгляд обнаружилось, что этот робот проверяет исключительно страницы в урле которых присутствуют русские символы энкоженые конечно же.
Типа:
xxxx.ru/%CF%D4%D7%C5%D2%D4%CB%C1.html (/отвертка.html в KOI8)
Anton, ну вот вам и первая зацепка. :) Это, конечно, не показатель, но уже кое-что. Можно поставить эксперимент и проверить догадки ;)
вот и у меня уже второй день подряд заходил этот же бот с ip 83.222.4.47
Yandex/1.01.001 (compatible; Win16; i)
ip этот по whois принадлежит мастерхосту
и оба раза смотрел только одну страницу, на которой только две ссылки тематического обмена с хорошими чистыми ресурсами