Я даже прочел но все равно ничего не понял... ТС поясните плиз ))
Опишите подробнее: ваша фирма, гарантии оплаты...
Доска лежит на одной площадке с порталом? норм портал гугл хавает? просто может быть сервер не пускает бота, или домен в бане, киньте в личку домен, посмотрим
Antonsad добавил 24.02.2011 в 12:40
Да, поддомен в бане, остальные ваши поддомены норм индексируются, и им енно каталог в бане, может быть изначально что то делали с ним не чистое что гугл его в бан занес....
Мой совет только в гугл писать, так как все остальное на мой взгляд нормально, кроме того что ссылок куча - но это ведь и есть каталог )))
просмотрел свои в бане за продажу ссылок, уже год висят, без изменений (((( думал может апп выдергивающий сайты с бана :)
websat написал вам в личку, жду комментариев ...
Himiko а не подскажите максимально допустимые настройки в robots.txt в этом деле?
ТС, странная манера подачи товара. Вы же сайт продаете знающим в этом толк людям за большие деньги, а отношение как будто дор за 90 центов школьнику.
Himiko верно, но мне нужен был именно общий стат посещений ботов, так как для снятия нагрузки с сервера была установлена задержка одновременного посещения сервера с одного IP. я и хотел глянуть на сколько меньше стали ходить боты с таким ограничением.
/log/nginx/access.log вот тут можно найти всех ботов которые посетили сервер, там же какие конретно стр они просматривали....
ну почему же в логах сайтов, бот то ломиться на сайт а сервер это фиксирует в логах своих, вот только в каких логах смотреть с какого IP заходили на сайты?
