Добро пожалывать в реальность :)
Тут другой вопрос.... а есть ли сколько сайтов, РАБОЧИХ, для этой утопической "Громадной" базы?
Бред....
10 бредов.
Досвидание :)
ИМХО всё проще.
У пользователя стоит ГуглоБар, он зашёл на Ваш сайт, потом ошибся страницей, ну чёт не правильно вбил, ему выдалось 404, а гуглобар отправил боту, мол проверь что за страница там.
А что за база каталогов то?
:D Читаем мой пост выше и ещё раз, медленно и внятно. Особенно уделяем внимание предложению:
А то что ваш скрипт отлавливает, эт обычные боты для индекса, для бана и т.п. другие ходят.
Лучше "Купить" т.к. я прихожу на инет-магазин, покупать, а не в корзинку складывать :)
в топку. Боты ходят и не представляются. А ещё, никто не знает все IP ботов ПС , поэтому и БАНят за этот метод.
