csp

моя vps работает, а что главная не грузится это уже не столь существенно. вообще ihc стабильно работает, с моей стороны нареканий нет .

это и понятно что через хром сливается инфа о всех урлах и переходах по ним. например ыт заходишь в админку, доступ ограниченный по айпи, бот не пройдет. но факт запроса на страницу будет. или сделал страницу перешел в браузере, и бот тут как тут.

В логах конечно есть моменты интересные, например

176.113.137.226 - - [19/Jan/2016:09:18:05 +0200] "GET  мой .exe HTTP/1.1" 404 16642 "-" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.6) Gecko/20100625 Firefox/3.6.6"

176.113.137.226 - - [19/Jan/2016:09:18:06 +0200] "GET /components/com_k2/css/k2.css HTTP/1.1" 200 8413 referrer = мой.exe" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.6) Gecko/20100625 Firefox/3.6.6"

176.113.137.226 - - [19/Jan/2016:09:18:06 +0200] "GET /templates/jsn_escape_pro/favicon.ico HTTP/1.1" 200 1406 "-" "Mozilla/5.0 (Windows; U; Windows NT 5.1; ru; rv:1.9.2.6) Gecko/20100625 Firefox/3.6.6"

176.113.137.226 - - [19/Jan/2016:09:18:06 +0200] "GET /components/com_imageshow/assets/css/style.css HTTP/1.1" 200 613 

нельзя грузить в браузере .exe первым заходом на сайт а потом загружать стили сайта, это не логично.

для сравнения переход в хроме на тот же файл

ip - - [19/Jan/2016:10:37:46 +0200] "GET *****.exe HTTP/1.1" 404 16642 "реферер папки но не файла" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.111 Safari/537.36"

ip - - [19/Jan/2016:10:37:46 +0200] "GET ******.exe HTTP/1.1" 404 16642 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.111 Safari/537.36"

ip - - [19/Jan/2016:10:37:47 +0200] "GET ******.exe HTTP/1.1" 404 16642 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.111 Safari/537.36"

где далее, ничего не грузится. попробую все таки магнитные ссылки через 2-3 домена оставить, посмотрим как будет.

судя по офф инфе "Теперь, с введением сканирования по географическим регионам, робот будет использовать и адреса из других стран, например из Австралии или России"

просто закрыть ему забугор не выйдет, может воспользоватся кроме юзерагента как предлагает сам гугл

revers dns , я так понимаю и дополнительно по нему прочекать типа gethostbyaddr()

базы ботов постоянно меняются, но айпишники по идее всегда должны принадлежать AS google

Я зарабатываю на раскрутке серверов из этой игры. Больше инсталлов и пользователей - мне лучше.

Вы можете совать ее в бандлы, никто не запрещает. Вечные траблы с палевностью, сменами доменов и тд меня не устраивают.

если на странице только <html>hello yandex!</html> то бывает.

ясн. купил еще домен 2003 года, попробую для интереса его тоже.

это шутка? или вы не знаете ответы апача 404

Кто за повтор?)

я смотрел колво запросов, и по вордстату и по гуглу, по НЧ это "crfxfnm rc 1.6", "cs 1.6 скачать" и тд.

подвинуть топовые сайты тоже можно, http-udp печеньками;)