https и домен .рф

[Удален]
1020

Здравствуйте, назрел тут один вопрос... До этого с доменами .рф не пересекался.

В директиве host в robot.txt как прописать? Вида https://мойдомен.рф или https://xn----8sbcpb0b5uif9br8cj.xn--p1ai/

Есть ли разница?

obriy
На сайте с 04.01.2014
Offline
94
#1

в Punycode

R1
На сайте с 21.11.2015
Offline
1
Ra1
#2

А что как прописан сайт по русски, не поймет система?

дорогу познает идущий!
S
На сайте с 05.01.2013
Offline
40
#3
Ra1:
А что как прописан сайт по русски, не поймет система?

гугль поймет:

IDNs are equivalent to their punycode versions. See also RFC 3492.

, отсюда:https://developers.google.com/webmasters/control-crawl-index/docs/robots_txt

, но надо url-енкодить домены: https://blogs.bing.com/webmaster/2009/11/05/robots-speaking-many-languages/ (так что легче в punicode)

Яндекс тоже признается в русофобии но при этом открыто требует punycode, то есть idn не поймет:

Использование кириллицы запрещено в файлах robots.txt и http-заголовках сервера.
Для указания имен доменов используется Punycode

отсюда:

https://yandex.ru/support/webmaster/yandex-indexing/cyrillic-urls.xml

Ну и на последок - надо внимательно смотреть, в какой кодировке сам роботс и какая указана в хидерах, естественно, они должны совпадать.

Germanarich
На сайте с 19.08.2015
Offline
86
#4

Насколько я знаю домены рф чрезвычайно тяжелы для продвижения

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий