Только проксирование средствами веб-сервера (http://httpd.apache.org/docs/2.2/mod/mod_proxy.html или http://nginx.org/en/docs/http/ngx_http_proxy_module.html соответственно)
robots.txt не индексируется же, поэтому парадокс курицы и яйца тут не возникнет :)
А sitemap.xml в sitemap.xml не пробовали добавлять?
Да. . . . . . . . . . .
Так и не должно было текущие значения поменять - просто файл sysctl.conf восстановиться должен, как и просили в общем-то. См. /etc/sysctl.conf.rpm-new. Переименуйте в sysctl.conf и перезагрузитесь.
yum reinstall initscripts
А у меня X-Frame-Options и CSP. Толокняне будут "двойки" ставить, что сайт не открывается? :/
https://ru.wikipedia.org/wiki/%D0%A1%D0%BA%D1%80%D0%B8%D0%BF%D1%82-%D0%BA%D0%B8%D0%B4%D0%B4%D0%B8
Таких клонов удобно превращать в свои дорвеи, отдавая им по IP-адресу иной контент, чем на своем сайте ;) Если конечно 1-в-1 идет клонирование.
Можно так https://tech.yandex.ru/detector/
Но скорее всего вам нужен адаптивный веб дизайн просто
1. Гречка дорожает, людям не до дверей
2. Много рекламодателей
3. Изменились поисковые подсказки
масса факторов
