Кто такие Inktomi Slurp и larbin

S1

72

Sergey13

21 сентября 2005, 12:09

822

Ходят эти боты у меня , столько трафа сожрали уже, может есть смысл их забанить в robots.txt?

WA

103

WebAndrey

21 сентября 2005, 15:51

#1

Inktomi Slurp - это Яху

насчет второго, не знаю

[Удален]

21 сентября 2005, 19:15

#2

яха жрет много регулярно ... правда я немогу его приготовить :)

75

bejee

22 сентября 2005, 07:12

#3

второй, это не индекс бот, изделие отсюда hююp://larbin.sourceforge.net/index-eng.html

Незнание правил форума не освобождает от ответственности.