Что за бот такой?

S

6

Sammy

31 июля 2004, 17:30

473

Вчера заходил такой бот LinkWalker

Что это за бот, знает кто-нибудь?

A

44

atomar

31 июля 2004, 17:50

#1

S

6

Sammy

31 июля 2004, 18:38

#2

Спасибо, Атомар. А как запретить его в роботс?

A

44

atomar

31 июля 2004, 18:48

#3

Попробуй вот так:

User-agent: LinkWalker

Disallow: /

S

6

Sammy

31 июля 2004, 19:34

#4

Спасибо!

Предлагаю поделиться информацией, какие боты желательно закрыть в роботс. Я например закрываю

DISCo Pump, Wget, WebZIP, Teleport Pro, WebSnake, Offline Explorer, Web-By-Mail, Teleport Pro/1.29, Scooter-W3-1.0

теперь прибавился еще LinkWalker

Может есть у кого еще информация, кого не нужно пускать на сайт?

Кроме Гугля и Яху:) ессесно...

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие