Как закрыть системные папки от Гугла?

J
На сайте с 23.03.2018
Offline
13
311

Всем привет. Ситуация следующая:

Настроил robots.txt, пару месяцев было всё отлично. Спустя какое то время начали появляться в индексе гугла файлы из системной папки (битриксовые, php). Притом, что эта папка добавлена в роботс. Пробовал настроить x-robots-tags на содержимое папки - не вышло.

Что странно, сама папка отдает 403 код ответа сервера, а содержимое - 200.

Кто сталкивался с подобным? Чем лечится?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий