Бот Google разбушевался

12
OR
На сайте с 20.11.2008
Offline
20
#11

Повторно поставил nginx и выпустил на свободу бот Google. Посмотрим, кто - кого.

Создание и продвижение сайтов от 3000 руб. "У нас будет два интернета: один для здравомыслящих людей, а второй, – в зоне «.рф»" (М. Якушев)
dvaes
На сайте с 03.09.2007
Offline
65
#12

ip какой у вашего гугл бота? юзер-агент в любом парсере замаскировать можно

OR
На сайте с 20.11.2008
Offline
20
#13
dvaes:
ip какой у вашего гугл бота? юзер-агент в любом парсере замаскировать можно

xxx.6

xxx.8

Но все же nginx победил. Все боты (и даже Google) выпущены на свободу, а сайт не просто летает - порхает.

P.S. И все виноваты программисты (так считаю), писать код надо заранее зная, что будут такие ситуации с запросами ботов и прочих.

RO
На сайте с 13.07.2009
Offline
88
#14
P.S. И все виноваты программисты (так считаю), писать код надо заранее зная, что будут такие ситуации с запросами ботов и прочих.

они всегда во всем виноваты

[Удален]
#15

onekurs.ru, виноваты бомжи заказчики - которые платят за дерьмо, дерьмо и получают.

вы как нгинкс поставили? как фронтенд прокси? тогда программисты тут не причем, нгинкс - не волшебная палочка, он запросы так и передает дальше без изменений веб серверу, а вот ответ гавноботам отдает получше апача, который видимо вам жизнь и портил.

а так да, полностью согласен, программисты всегда виноваты. в том, что родились правда :)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий