robots.txt нигде не нашёл инфу как закрыть ссылку такого вида

AlexAxe
На сайте с 10.07.2006
Offline
117
525

Здравствуйте. Не могу закрыть для индексации папку.

Вернее саму папку могу закрыть, а вот подпапку не получается. Изначально в движке была закрыта основная папка, но в ней лежит инфа, которую нужно проиндексировать.

Вот ссылка:

Читал форум и дополнительную инфу, но, к сожалению человеку с такой же проблемой не ответили. Также пробовал разные варианты, читал доки, проверял это всё через форму яндекса(проверка robots.txt)

Нужно, чтобы папка modules была открыта, а содержимое в ней было частично закрыто, то есть закрыть Statistics, но не закрывать modules.

Так как в этой папке лежить каталог ссылок и много ещё полезного.

Робот яши грызёт статистику, которая постоянно изменяется, а другие страницы плохо индексирует.

Надеюсь Вы ответите на конкретный вопрос.

G
На сайте с 12.06.2006
Offline
88
#1

Посмотрите здесь http://mastertalk.ru/topic6726.html

AlexAxe
На сайте с 10.07.2006
Offline
117
#2
Gates:
Посмотрите здесь http://mastertalk.ru/topic6726.html

Огромное Вам спасибо. Я немного тупанул:) просто нервничал. Ресурс полезный, всё получилось, как там написано. Проверил, через форму яши.:)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий