Как запретить индексацию зеркал?

C
На сайте с 01.11.2008
Offline
118
315

У сайту прилинковано 3 домена

site1.ru

site2.ru

site3.ru

Подскажите, как запретить индексацию site2 и site3?

301 редирект не канает, нужно чтоб по всем 3-м именам сайт отзывался и работал, словно это 3 разных сайта

Размещу ваши статьи на СДЛ: стройка, авто, сми (/ru/forum/943964")
M
На сайте с 04.12.2013
Offline
223
#1

Disallow: / для копий.

---------- Добавлено 03.01.2020 в 15:11 ----------

Или не настраивать доп. домены раньше времени в публичных DNS.

Домены и скрипт для коротких ссылок: https://u75.ru/domains-for-shortcuts
Anamnado
На сайте с 08.02.2010
Offline
242
#2

запретом индексировать в robots.txt

НО ! для ПС может уже произойте расклейка

суть зеркал в том что у них всё одинаково.

- это догадка не утверждение. (практики не было)

ПО всей логике должна произойти.

C
На сайте с 01.11.2008
Offline
118
#3
miketomlin:
Disallow: / для копий.

---------- Добавлено 03.01.2020 в 15:11 ----------

Или не настраивать доп. домены раньше времени в публичных DNS.

Поясните подробнее, пожалуйста. У меня физически одна папка с файлами сайта, и соответственно, один robots.txt Не понимаю, как его настроить для разных доменных имен

Anamnado
На сайте с 08.02.2010
Offline
242
#4

robots.txt свой для каждого сайта.

Cerhio:
сайта,

если у вас нет доступа к другим ничем помочь нельзя - и можете закрыть только свой

Samail
На сайте с 10.05.2007
Offline
369
#5
Cerhio:
У меня физически одна папка с файлами сайта, и соответственно, один robots.txt Не понимаю, как его настроить для разных доменных имен

Содай ещё один файл robots_2.txt в нём запрет на индексацию, в .htaccess:

RewriteEngine On
RewriteCond %{HTTP_HOST} !^domain\.ru$ [NC]
RewriteCond %{REQUEST_URI} ^/robots.txt$
RewriteRule .* /robots_2.txt [L]
M
На сайте с 04.12.2013
Offline
223
#6
Cerhio:
Поясните подробнее, пожалуйста. У меня физически одна папка с файлами сайта, и соответственно, один robots.txt

Ну, например, рерайт в файлы robots_%{HTTP_HOST}

Lazy Badger
На сайте с 14.06.2017
Offline
228
#7

Samail, руль все же в таком виде

RewriteRule .* /robots_%{HTTP_HOST}.txt [L]

будет слегка лучше

Производство жести методом непрерывного отжига

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий