- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Народ нужно узнать имена ботов бот какими они авторизируються при заходе на сайт, желательно список полный где нить найти, спасибо
Боты поисковиков:
http://www.jafsoft.com/searchengines/webbots.html
Довольно большой список ботов:
http://www.psychedelix.com/agents.html
(The Web Robots Database, правда больше любительских)
http://www.robotstxt.org/wc/active.html
ууу.... А вообшем можно как то определить бота, одной строчкой кода, а то все названия в базу вносить, просто у них может какая то фича есть, что мона определить! Спасибо
Если нет то можеш дать ссылку не на такой гигантский список,а на названия основных ботов!
+Yandex&type=4&page=1&theme=0&day1=22&month1=7&year1=2003&day2=22&month2=8&year2=2004&charset=koi8-r&datesort=&authority=&charset=koi8-r
aport
yandex
stackrambler
yandexbot
googlebot
Какие еще есть русские боты, а точней боты котрые приносят посешаемость? Как там пунто авторизируеться?
Спасибо
а как можно забанить определенного бота, если я не хочу допустим, чтобы кто-то определенный меня посещал?
flucky, попробуйте robots.txt .