Спасибо, вроде разобрался уже. Иногда такие структуры за голову хватаешься. :)
Да нет, тут вопрос не в карте сайта. А в том, будет ли dir3 и глубже индексироваться поисковыми системами при таком robots, задача его не индексировать, а dir1 и dir2 разные всегда.
Проблема в том, что Яндекс проверка роботс говорит, что все верно. А генераторы сайт меп останавливаются на /dir1/ при таком роботс.
Добрый день. Подскажите плиз.
Есть сайт site.ru
У него есть урлы вида site.ru/dir1/dir2/dir3/ и так далее.
Я хочу оставить не закрытыми dir 1 и dir 2 при том, что они разные всегда (то есть может быть так site.ru/dir01/dir02/dir3/ или site.ru/dir001/dir002/dir3) их тысячи
Как мне закрыть dir3 и все что глубже при этом не закрыть уровни 1 и 2
Я пробовал вот так:
User-agent: *
Disallow: /*/*/
Яндекс говорит, что все ок, но карта сайта генераторами не собирается.
Нет смежные запросы, до сих пор около топа.
Вчера вернулось обратно в топ и опять вылетело.
По поводу того, что заново начал все индексировать, я так и подумал. Может действительно подбирает новое место сайту.
Посадочная не изменилась. Проверяю по разному, скриптами и вручную.
Алексей, спасибо, потерял пароль от своего акка с 2005 года :) Плюсанул бы.
