Как полностью удалить сайт из индексации?

12
G1
На сайте с 18.03.2019
Offline
12
779

Всем привет, кто знает, как можно ускорить процесс удаления сайта из индексации test.site.ru. Создали тестовую версию для разработки не закрытую от индексации, заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом. Сейчас поддомен удалили, но он до сих пор индексируется и мешает индексации основного домена, создавая конкуренцию и сильно снижая его позиции.

X
На сайте с 04.12.2018
Offline
285
#1

Загрузите на поддомен robots.txt с содержанием:

User-agent: *
Disallow: /

+ в webmaster yandex отправить на удаление.

Довольно быстро вывалится.

Удобный съем позиций (http://allpositions.ru/redirect/58277)
donc
На сайте с 16.01.2007
Offline
680
#2

отдавать ботам 410 ошибку будет вернее

Продвижение сайтов от 25 000 в мес, прозрачно, надежно https://searchengines.guru/ru/forum/818412 , но не быстро, отзывы
T
На сайте с 24.10.2011
Offline
63
#3

Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен - так вы получите тех пользователей, которые перейдут на него из страниц поиска.

donc
На сайте с 16.01.2007
Offline
680
#4
tekseo:
Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен

Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

T
На сайте с 24.10.2011
Offline
63
#5
donc:
отдавать ботам 410 ошибку будет вернее

Тоже вариант, не готов сказать что будет быстрее, можно в связке использовать роботс, 301 редирект и 410 ошибку

410 ошибка создаётся так (в файле htaccess)

RewriteEngine On

RewriteCond %{REQUEST_URI} /(.*)

RewriteRule (.*) http://www.x1.y1.ru$1 [R=410,L]

где x1 - поддомен y1 - основной доме

---------- Добавлено 13.11.2019 в 13:13 ----------

donc:
Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

Пока страницы уйдут из индекса - пройдет время, на это время пользователи будут перебрасываться на основной домен. Разве это плохо?

donc
На сайте с 16.01.2007
Offline
680
#6
tekseo:
Пока страницы уйдут из индекса - пройдет время, на это время пользователи

Мдя. Откуда посетители на зеркале? Может почитать про зеркала?

Gera1:
заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом.

Что еще нового расскажете?

Алексей
На сайте с 23.02.2009
Offline
580
#7
donc:
отдавать ботам 410 ошибку будет вернее

лучше как скайнет уничтожали во втором терминаторе)))

Snake800
На сайте с 02.02.2011
Offline
222
#8
tekseo:
можно в связке использовать роботс, 301 редирект и 410 ошибку

Ну ладно ещё с принципами robots.txt можно тупить. Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

donc
На сайте с 16.01.2007
Offline
680
#9
Snake800:
Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

версия одна - надо смотреть когда там каникулы в школе.

Z0
На сайте с 03.09.2009
Offline
813
#10
donc:
версия одна - надо смотреть когда там каникулы в школе.

Закончились на той неделе :)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий