Ради охранников?🤪
Почему бы и нет, пущай выкладывает где-что-почём.
Золотые слова. Странно, что остались хостинги, где это не так!
Что это за девушка и как её зовут?
Платоны в итоге никого не обманули. Всё как по манулу.
У меня было так:
Запрет на индексацию определёных URL-ов с вхождением ph_agree не срабатывал! В итоге, они мне сказали, что нужно поменять местами директивы Allow и Disallow. Получается, что директивы как бы обрабатываются в порядке снизу вверх. Те, что вверху, перебивают, те что внизу в роботсе. В этом варианте (см. выше) оказывалось, что разрешена индексация всего сайта, ничего не запрещено.
Сделал так:
Всё стало ОК!
Kost, спасибо, что направили на путь истинный)
Наверное, он решил промолчать, планктон потешится в топике и затихнет.
ШАНС-ON, за что бабки то должны? И что Шессмастер притих?
Почему не тот? Закрыть индексацию ненужных страниц - отличный ход. Другое дело, а ненужные ли они?
Да, с моей логикой расходится чуток). Привык, что следующие директивы, обычно, перебивают предыдущие. А у яшки, кто раньше, тот король горы и никак его уже не переопределить.
Меня тоже это удивило. Но когда было наоборот, анализатор яшки работал некорректно для роботса на сайте www.java-games.ru
В итоге я переписывался с Платонами по такому странному косяку и мне сказали прямым текстом сказали, что нужно сначала дисаллоу). Я тоже удивлялся, но анализатор действительно начал корректно отрабатывать запреты и разрешения.
В итоге вот такой роботс получился:
В ответ я платонам отписал, что это как-то нелогично выходит. Типа Аллоу идёт в конце, но не перебивает предыдущие дисаллоу. Очень странно. И тоже им же кинул ссыль на их хелп. Промолчали)
Хотя, получается, что первый дисаллоу всё перебивает. Выходит что так. И если дисаллоу будет /, то реально весь сайт запретит индексировать. В общем, логику я пока не улавливаю такого поведения. Но уж как есть.
Только сначала Disallow: /потом40 Allow: с адресами страницAllow: /shop/CID_314.htmlAllow: /shop/CID_83.htmlAllow: /shop/CID_82.html и т.д.
Правильным будет такой подход:
И не забудьте проверить роботс в анализаторе яшки. А то всякие сюрпризы бывают.
