Форум Поисковые системы Прочие поисковики

Вот зверька какого поймал!

[Удален]
1272

Зверек: SlySearch/1.0 http://www.plagiarism.org/crawler/robotinfo.html

Приходит с айпишника 64.140.48.30 (имя не ресолвится). Питается динамикой :) Кушает по две страницы в минуту, пока все не съест - не уходит. Прошу любить и жаловать.

K
На сайте с 31.01.2001
Offline
737
Kost
#1

А ты его через robots.txt запрети, он понимает.

Он враг любителей рефератов ;-).

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
Григорий Селезнев
На сайте с 25.09.2001
Offline
298
Григорий Селезнев
#2

причем у него пишется

Disallow: *

а не

Disallow: /

[Удален]
#3

Я просто фигею! Я написал user-agent, в которым ссылка на информацию об этом роботе. Мне в ответ двое прислали выдержки из информации, написанной по тому адресу :) Пора нам заводить раздел "Отдельная палата", как на одном из форумов :)

Резкий всплеск прямых заходов. Digital Caramel - помогаем Защита от ботов для
Polite Moose
На сайте с 22.04.2002
Offline
85
Polite Moose
#4
Зверек: SlySearch/1.0 http://www.plagiarism.org/crawler/robotinfo.html
Кушает по две страницы в минуту, пока все не съест - не уходит.

Заходил и ко мне. 10.5.02 скушал 10 страниц и сгинул. Вернулся 21.5.02, съел одну из просмотренных ранее страниц и снова ушел.

То ли я не вкусный :), то ли зверек сытый :)

Удачи, доброго пива (http://www.fifth-ocean.ru/) и настроения! Релевантность определяется не тИЦ, не ВИЦ, не количеством ссылок, не частотой ключевого слова, а соответствием запросу!
Polite Moose
На сайте с 22.04.2002
Offline
85
Polite Moose
#5

А вот не подскажет ли кто, есть ли у русского Лайкоса свой робот?

И если да, то как его зовут?

Сайт мой, русский Лайкос находит, а в статистике за 4 месяца я его паучка найти не могу :(

И вообче, у кого какие соображения по русскому Лайкосу? Имхо - странная машинка. Четыре раза за четыре месяца подавал сайт в каталог - ни ответа ни привета. Зато новости и развечения всегда свежие.

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
wolf
На сайте с 13.03.2001
Offline
1183
wolf
#6
А вот не подскажет ли кто, есть ли у русского Лайкоса свой робот?

Дык у Лайкоса своего робота нету. Он пользуется базой FAST'а

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )
Polite Moose
На сайте с 22.04.2002
Offline
85
Polite Moose
#7

wolf, спасибо.

А я то голову ломал :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий