Форум Практика оптимизации Общие вопросы оптимизации

301 редирект и запрет индексации в robots.txt

G
На сайте с 04.02.2006
Offline
71
gexogensib
2571

Господа, вопрос может быть и глупый, но тем не менее.

Если сделать для определенных страниц сайта 301 редирект на другие новые url на этом же домене

и одновременно

в файле robots.txt указать запрет индексации страниц с которых делаем редирект,

то перейдет ли яндекс по 301 редиректу на новые страницы и внесет ли их в поиск??

mark3000
На сайте с 29.08.2009
Offline
115
mark3000
#1

А просто ссылку поставить не получится? :) 301 нужен если хотите перенести точно такую же страницу на новый url.

LINKOSCOP 4.2 (http://www.interascope.biz/linkoscop-4/) это 100+ функций для работы с внутренней перелинковкой
C
На сайте с 20.08.2007
Offline
65
creeping
#2

Какой смысл делать запрет в robots.txt?

Как только поисковик пронюхает 301 редирект, он везде изменит ссылки на новые, не оставив старого варианта. Они просто испарятся через некоторое время.

YS
На сайте с 06.11.2012
Offline
0
Yuliya_S
#3

Добрый день, я знаю, что подобная тема уже была и я внимательно её изучила, но так и не поняла, почему у меня яндекс при проверке файла роботекс пишет: "Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление." блог

http://love-wed.blogspot.ru/

файл robot.txt выглядет так

User-agent: Mediapartners-Google

Disallow:

User-agent: Yandex

Disallow:

User-agent: Mail.ru

Disallow:

У меня нет никакого редикта, а главным зеркалом я выбрала название сайта без www, но это было сделано уже после того, как сайт перестал индексироваться

Заранее спасибо

Работа robots.txt Направить на основное зеркало! robots.txt

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий