Несколько robots.txt на одном сайте

78

arman1231

21 января 2021, 07:42

197

Коллеги, подскажите пожалуйста.

Ситуация следующая.

В корне сайта лежит site.ru/robots.txt, но так как сайт мультиязычный, в зависимости от языка, к url добавляется подкатегория с языком и выглядит это вот так site.ru/en/.

Однако, в связи с особенностями бекэнда, тянется и роботс и выглядит это вот так site.ru/en/robots.txt, site.ru/de/robots.txt и т.п.

Вопрос. Оставить так, как есть сейчас или оставить только один роботс в корне?

Дорогу осилит идущий

224

skapunker

21 января 2021, 07:46

#1

arman1231 :
Однако, в связи с особенностями бекэнда, тянется и роботс и выглядит это вот так site.ru/en/robots.txt, site.ru/de/robots.txt и т.п.

эти роботсы не учитываются, учитывается только тот, который в корне

1

78

arman1231

21 января 2021, 07:51

#2

skapunker #:

эти роботсы не учитываются, учитывается только тот, который в корне

Спасибо, а подскажите еще пожалуйста. С чем может быть связано, что в англоязычную выдачу подтягиваются тайтлы и дескрипшены на русском?

Яндекс и Google начали Google представил новую разметку Google Search Console уведомляет

444

sergv

21 января 2021, 09:29

#3

Так написан и работает ваш скрипт.

Что делать, если ваша email-рассылка попала в спам

В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах