Форум Поисковые системы Яндекс

Подскажите имена ботов?

Y
На сайте с 20.05.2004
Offline
103
yas
6061

Народ нужно узнать имена ботов бот какими они авторизируються при заходе на сайт, желательно список полный где нить найти, спасибо

GK
На сайте с 07.02.2001
Offline
29
Green Kakadu
#1

Боты поисковиков:

http://www.jafsoft.com/searchengines/webbots.html

Довольно большой список ботов:

http://www.psychedelix.com/agents.html

(The Web Robots Database, правда больше любительских)

http://www.robotstxt.org/wc/active.html

webscript.ru (http://webscript.ru)
Y
На сайте с 20.05.2004
Offline
103
yas
#2

ууу.... А вообшем можно как то определить бота, одной строчкой кода, а то все названия в базу вносить, просто у них может какая то фича есть, что мона определить! Спасибо

Если нет то можеш дать ссылку не на такой гигантский список,а на названия основных ботов!

Как заблокировать ботов идущими VPS вырубается, арендуем 24ГБ Трафик с яндекса: какой
spark
На сайте с 24.01.2001
Offline
130
spark
#3

+Yandex&type=4&page=1&theme=0&day1=22&month1=7&year1=2003&day2=22&month2=8&year2=2004&charset=koi8-r&datesort=&authority=&charset=koi8-r

Y
На сайте с 20.05.2004
Offline
103
yas
#4

aport

yandex

stackrambler

yandexbot

googlebot

Какие еще есть русские боты, а точней боты котрые приносят посешаемость? Как там пунто авторизируеться?

Спасибо

F
На сайте с 13.08.2004
Offline
255
flucky
#5

а как можно забанить определенного бота, если я не хочу допустим, чтобы кто-то определенный меня посещал?

Продажа мотоциклов (http://www.moto-sale.ru/), скутеров и мопедов
K
На сайте с 31.01.2001
Offline
737
Kost
#6

flucky, попробуйте robots.txt .

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий