Потому, что он считывает данные с вашего браузера. PageSpeed открывает в вашем браузер проверяемый сайт.
А Google бот это отдельный скрипт, которые индексирует сайт.
Это вообще разные вещи.
Потому, что Google считывает robots.txt не каждый раз при запросе. Поэтому вам нужно сначала ждать когда же будет переиндексация его или принудительно сделать переиндексацию.
Хороший вопрос.
Думаю вам поможет запрет на редактирования .hta и директива php open_basedir
https://stackoverflow.com/questions/13291185/how-to-set-for-specific-directory-open-basedir
Но если подумать, то эта же директива будет работать и на локалке, тем самым ограничивая область PHP
Вы можете установить её до вашей директории, а далее попробовать обычный скрипт
echo file_get_contents("C:\\Windows\\system.ini");
Если выбьет ошибку open_basedir, значит всё ок
Браузер тут не при чём, это всё в вашем движке.
Да это доры, работают через партнёрку admitad.com
Дайте угадаю. Вы залогенены в ВК?
В принципе да. У меня куча скриптов для работы, которые запускаются через PHP и файлы исправляют и т.д.
Но apache работает от админа, и темы я всякие не запускают.
Думаю для такого лучше какой-нибудь поддомен юзать на своём сайте.
Очень интересный магазин, о котором ничего не известно: https://mslavia.ru/o-magazine
ИП? ООО? ---------- Добавлено 28.06.2019 в 17:42 ----------
А если НЕТ? То что будем делать?
юзерагент можно любой выставлять. Это может быть просто парсер.
Каждая новость на отдельном поддомене... хм... каждый поддомен как отдельный одностраничник... Идейку надо протестировать.
Скандалы, интриги, расследования
🍿