Да вряд ли... Я тут подумал - эта тема - расплывчатая и непонятная.
Яндекс - быть может, мне интересны англоязычные.
mod_rewrite - во-первых, я пока не очень понял по документации о нем, как это делается, во-вторых, у меня сложилось впечатление, что это работает небыстро...
Хорошо, пойду в поиск. Но "Если да"... Так "да" ?
Ясненько, спасибо большое.
Минуточку... но ведь в Disallow записывается то, что нужно запрещать к индекированию. А у меня такого нет. Так что же мне в Disallow записать?
Ясно, спасибо. И последний вопрос... Только что в яндексе заметил - там написано, что robots.txt с host только на зеркала класть. Тут же мне посоветовали и на зеркало, и на настоящий. Можно разъяснить сие противоречие?
Ой, вот вопрос... А можно ли... и нужно ли, вот так:
User-Agent: *
Host: www.handsmetals.com
Host: handsmetals.com
?
Содержимое тоже правильно? А то синтаксис ведь значим, полагаю... Весь robots.txt состоит из этих двух строк. Так?
Очень похоже на правду. Скажите, а мне нужно robots.txt на оба сайта поставить, и в каждом содержимое
Причем, ведет с обоих файлов (серверов) на платный хостинг. Так?
Т.е., если покороче вопрос сформулировать: robots.txt должен быть на обоих севрерах - на зеркале, и на основном?
А как зеркала могут проверяться? По метам? Ведь целевая фраза у меня конкретная, и находиться должно по ней... И если именно так зеркала проверяются, то как бы я сайт не переделывал...