Бот Я приходит со странными страницами

[Удален]
492

Приветствую. Вот что сегодня увидел в логе:

02.09.2005, 09:15 - Yandex/1.01.001 (compatible; Win16; I) - /?q=russia+visa
02.09.2005, 09:15 - Yandex/1.01.001 (compatible; Win16; I) - /?q=accomodation
02.09.2005, 09:15 - Yandex/1.01.001 (compatible; Win16; I) - /?q=places+to+stay
02.09.2005, 09:15 - Yandex/1.01.001 (compatible; Win16; I) - /?q=hiking
02.09.2005, 09:15 - Yandex/1.01.001 (compatible; Win16; I) - /?q=hoteles
02.09.2005, 17:21 - Yandex/1.01.001 (compatible; Win16; I) - /?q=mediation
02.09.2005, 17:21 - Yandex/1.01.001 (compatible; Win16; I) - /?q=legal+contracts
02.09.2005, 21:52 - Yandex/1.01.001 (compatible; Win16; I) - /?q=international+human+rights
02.09.2005, 23:24 - Yandex/1.01.001 (compatible; Win16; I) - /?q=american+government

... и т.д.

Таких запросов довольно много. Таких страниц у меня не существует. Причем, через несколько строк встречаются периодически мои нормальные страницы. Кто-то разместил на меня ссылки такие вот где-то? У кого такое еще встречается?

Спасибо.

Polite Moose
На сайте с 22.04.2002
Offline
85
#1
Eagle:
Кто-то разместил на меня ссылки такие вот где-то?

Да. Скорее всего, судя по виду ссылки, Яндекс парсит некие результаты поиска. Например каталог с "примерами запросов" или "недавно спрашивали". В результатах, к урлам найденых сайтов плюсуется запрос.

Если Ваш движок возвращает на подобный запрос код 200, рекомендую запретить в robots.txt урлы начинающиеся на "/?q=". Толку от таких ссылок всё едино - ноль.

Удачи, доброго пива (http://www.fifth-ocean.ru/) и настроения! Релевантность определяется не тИЦ, не ВИЦ, не количеством ссылок, не частотой ключевого слова, а соответствием запросу!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий