Автогенерируемый robots.txt

R7
На сайте с 29.03.2019
Offline
1
718

На одном из сайтов такая вот штука - http://joxi.net/5mdy4ZMF3eVG52 , автогенерируемый robots.txt неким GWS. Погуглил GWS - google web server. Сайт- лендинг. Т.е на запрет индексации нужна только админка.

У разработчиков на дев версии robots.txt - правильный. При разархивации на нашу девку robots.txt приобретает этот вид. На каком этапе может происходить автогенерация и как исправить ?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий