Форум Поисковые системы Прочие поисковики

User-Agent's

AB

2

all-business.ru

20 апреля 2004, 09:21

885

Привет.

Вот есть у меня небольшая (264) база user agent'ов роботов, а где можно взять больше, да и вообще гденибудь они все перечислены? они же обновляются периодически а моей уже месяц...

http://all-business.ru (http://all-business.ru)

А

150

Анар

20 апреля 2004, 15:36

#1

Как писал all-business.ru
Привет.
Вот есть у меня небольшая (264) база user agent'ов роботов, а где можно взять больше?

Здесь...

http://www.robotstxt.org/wc/active/html/index.html

http://www.pgts.com.au/pgtsj/pgtsj0208d.html

http://www.netsys.com/cgi-bin/display_article.cgi?1193

http://www.psychedelix.com/agents.html

http://www.siteware.ch/webresources/useragents/spiders/

http://www.jafsoft.com/searchengines/webbots.html

http://www.actulab.com/identification-des-robots.php

...

Дальше продолжать?;) Зачем оно вам?

AB

2

all-business.ru

21 апреля 2004, 10:04

#2

Спасибо. для этого