Форум Практика оптимизации Doorways & Cloaking

Yandex/1.01.001 (compatible; Win16; H)

s91
На сайте с 13.04.2009
Offline
88
s91
2944

Был у меня один дорчик, который приносил немало трафа, но потом был признан зеркалом другого моего дора.

Залил вместо него другой контент. Прошло около 2 месяцев.

Теперь уже на протяжении недели ежедневно заходит Yandex/1.01.001 (compatible; Win16; H), и выкачивает главную дважды с разницей во времени 1-2 секунды.

Возможно что этот сайт раззеркалится и заново будет давать траф? Кто-нибудь выводил так сайты?

Кстати сайт под запретом к индексации

Не бывает белой и черной оптимизации. Бывает только обман и разные способы его реализации
su-root
На сайте с 15.08.2008
Offline
73
su-root
#1

Да, возможно... но не факт - может из-за глобальной смены контента уже никогда не залезть в индекс. оставьте его на пару апов, если появится, то вам повезло ;).

Кто ищет смысл, пусть сидит на небесах - в своих глазах!
seocore
На сайте с 25.09.2006
Offline
143
seocore
#2
s91:
Теперь уже на протяжении недели ежедневно заходит Yandex/1.01.001 (compatible; Win16; H)

вот и баньте всех ботов кроме I-бота и будет вам счастье (хотябы на время) 🚬

Инструменты для веб-мастера: кластеризатор СЯ (https://goo.gl/MQWfqO), все запросы конкурента (https://goo.gl/hd5uHS), дешевые XML-лимиты (https://goo.gl/aDZbPI)
bell387
На сайте с 25.06.2008
Offline
132
bell387
#3
seocore:
вот и баньте всех ботов кроме I-бота и будет вам счастье (хотябы на время) 🚬

с ваших слов следует, что бот - индексатор только И-бот(ай-бот) - подкрепите это как-нидь фактами пожалуйста.

п.с. никаких наездов - просто у меня сложилось мнение немного другое.

заранее спасибо!

файловый трафик конверчу в 20-30 баксов\кило (http://bitcash.ru/user/registration.html?r=470) здесь конвертятся диеты (http://www.moneysyst.biz?rid=354) лучший декстопный дорген (/ru/forum/436133)
SU
На сайте с 30.12.2008
Offline
35
sergey_usb
#4

А как в логах сервера называется ваш робот? Ваш робот "ходит" с одного IP-адреса?

У Яндекса есть несколько роботов, которые представляются по-разному.

* Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот

* Yandex/1.01.001 (compatible; Win16; P) — индексатор картинок

* Yandex/1.01.001 (compatible; Win16; H) — робот, определяющий зеркала сайтов

* Yandex/1.02.000 (compatible; Win16; F) — робот, индексирующий пиктограммы сайтов (favicons)

* Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее через форму «Добавить URL»

*

Yandex/1.01.001 (compatible; Win16; m),

Yandex/1.03.000 (compatible; Win16; M) — роботы, индексирующие мультимедийные данные

* YaDirectBot/1.0 (compatible; Win16; I) — робот, индексирующий страницы сайтов, участвующих в Рекламной сети Яндекса

* YandexBlog/0.99.101 (compatible; DOS3.30; Mozilla/5.0; B; robot) — робот поиска по блогам, индексирующий комментарии постов

IP-адресов, с которых «ходит» робот Яндекса, много, и они могут меняться. Список адресов мы не разглашаем.

Кроме роботов, у Яндекса есть несколько агентов-«простукивалок», которые определяют, доступен ли в данный момент сайт или документ, на который стоит ссылка в соответствующем сервисе.

* Yandex/2.01.000 (compatible; Win16; Dyatel; C) — «простукивалка» Яндекс.Каталога. Если сайт недоступен в течение нескольких дней, он снимается с публикации. Как только сайт начинает отвечать, он автоматически появляется в Каталоге.

* Yandex/2.01.000 (compatible; Win16; Dyatel; Z) — «простукивалка» Яндекс.Закладок. Ссылки на недоступные сайты помечаются серым цветом.

* Yandex/2.01.000 (compatible; Win16; Dyatel; D) — «простукивалка» Яндекс.Директа. Она проверяет корректность ссылок из объявлений перед модерацией. Никаких автоматических действий не предпринимается.

* Yandex/2.01.000 (compatible; Win16; Dyatel; N) — «простукивалка» Яндекс.Новостей. Она формирует статистические отчеты для контент-менеджера и информирует его о возможных проблемах у партнеров-поставщиков новостей.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий