Что это такое? Подскажите чуть поподробнее, пожалуйстаю
Помогите пожалуйста правильно составить robots
я на денвере всё тестирую, чтоб не попадать в подобные ситуации...
Что это такое? Подскажите чуть поподробнее, пожалуйстаю
Что не удивительно, ибо роботс составлен не правильно.
Ямануал гласит:
Это собсно всё содержимое роботса.
Однако роботс - это всего лишь рекомендация ПСам. Они всё равно гуляют по сайту и индексируют (но в выдачу могут не давать). Надёжнее будет ограничить доступ скажем только с определённых ИП (своих) или да, по паролю.
503 правильнее будет
Помогите пожалуйста правильно составить robots