Яндекс и 301 редирект

104

Bethub

20 октября 2016, 22:43

2248

Товарищи подскажите, если через .htaccess сделать 301 редирект на новый домен, имеет ли смысл на старом домене прописывать в robots.txt новый хост? Много раз слышал о том, что при переезде нужно делать и то и другое, но если в htaccess прописан редирект, то при анализе robots в панели вебмастера яндекса, вылазит следующее сообщение: "Сервер отвечает редиректом на запрос /robots.txt"

Отсюда собственно и вопрос, действительно ли при редиректе яндекс не может получить доступ к robots.txt или все таки он как-то его читает?

DP

32

DmitriyPopov

20 октября 2016, 22:52

#1

При переезде Яндекс советует сначала переехать через robots.txt, а уже потом, после того как зеркало перенесется (что можно будет увидеть в Яндекс.Вебмастере) делать редиректы.

В данном случае Яндекс действительно не сможет прочитать robots.txt, потому что сам по себе стандарт robots.txt подразумевает его распространение именно на том домене, на котором он лежит физически.

1

Когда-то руководитель группы сервисов для веб-мастеров Компании "Яндекс"

Переезд на новый домен Ссылки после переезда домен.РФ

155

paveldvlip

20 октября 2016, 23:23

#2

А что вам мешает не редиректить файл robots.txt?

TopSite () - программа определения позиций сайта, массовой проверки всех видов частотности, сбора позиций конкурентов и кластеризации запросов. HTML-отчёты.

135

JesterSoft

20 октября 2016, 23:36

#3

Я всегда делал так, в файле .htaccess:

RewriteEngine off

</FilesMatch>

1

155

paveldvlip

21 октября 2016, 07:55

#4

JesterSoft:
Я всегда делал так, в файле .htaccess:
<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>

Аналогично.

104

Bethub

21 октября 2016, 09:22

#5

JesterSoft:
Я всегда делал так, в файле .htaccess:
<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>

Благодарю, раньше не знал как это сделать)

Вышел новый Яндекс Браузер с YandexGPT и YandexART

Как снизить ДРР до 4,38% и повысить продажи с помощью VK Рекламы