useragent Апорта, Вебальты и т.д. для robots.txt

144

GTHack

19 июня 2006, 05:42

710

Хочу запретить всем ботам кроме русскоязычных поисковых шастать по сайту, подскажите плс useragent для русскоязычных поисковиков

K

737

Kost

19 июня 2006, 05:48

#1

Yandex

StackRambler

Aport

WebAlta

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

543

pauk

19 июня 2006, 07:21

#2

GTHack:
Хочу запретить всем ботам кроме русскоязычных поисковых шастать по сайту, подскажите плс useragent для русскоязычных поисковиков

Так это надо запрещать иностранным, по умолчанию-то разрешено

Hi!

K

737

Kost

19 июня 2006, 07:33

#3

Вроде можно некоторым разрешить, а всем остальным запретить.