Если страниц таких две-три, то проще. Если же их сотни, то лучше просто закрыть по маске буква-цифра.
Верно. Поэтому при составлении robots нужно знать всю структуру сайта. А ещё лучше - продумывать её перед созданием. Чтоб было меньше геморроя в будущем. А так... Какой был вопрос - такой был и ответ.
kimberlit добавил 20.06.2011 в 18:11
Так можно раздуть роботс до 100500 строк. Кост дал же рабочий вариант, если буква-цифры.
Allow: /ar
Allow: /te
Disallow: /a
Disallow: /t
А куда его надо ставить? И зачем?
Опечатка! Британские эксперты...
Нужно негодовать. Здесь. По любому поводу. Скопипастил и негодуешь.
Сейчас в моде крупнокалиберный револьвер. Ходи сам как дурак с пейджером. ЗЫ: Не забываем про мушку.
Копипаст зачётный. Пиши ещё.
Согласен, что криво, глупо и нелепо.
Но почему же не будет закрывать? Где в твоём любимом мануале это написано?
Почему же не закрывают?
