Как полностью удалить сайт из индексации?

12
G1
На сайте с 18.03.2019
Offline
12
752

Всем привет, кто знает, как можно ускорить процесс удаления сайта из индексации test.site.ru. Создали тестовую версию для разработки не закрытую от индексации, заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом. Сейчас поддомен удалили, но он до сих пор индексируется и мешает индексации основного домена, создавая конкуренцию и сильно снижая его позиции.

X
На сайте с 04.12.2018
Offline
153
#1

Загрузите на поддомен robots.txt с содержанием:

User-agent: *
Disallow: /

+ в webmaster yandex отправить на удаление.

Довольно быстро вывалится.

Удобный съем позиций (http://allpositions.ru/redirect/58277)
donc
На сайте с 16.01.2007
Offline
637
#2

отдавать ботам 410 ошибку будет вернее

А на этом SEO-форуме поиск работает (http://webimho.ru/) :) Продвижение сайтов от 25 000 в мес, прозрачно, надежно (/ru/forum/818412), но не быстро, отзывы (http://webimho.ru/topic/3225/)
T
На сайте с 24.10.2011
Offline
63
#3

Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен - так вы получите тех пользователей, которые перейдут на него из страниц поиска.

donc
На сайте с 16.01.2007
Offline
637
#4
tekseo:
Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен

Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

T
На сайте с 24.10.2011
Offline
63
#5
donc:
отдавать ботам 410 ошибку будет вернее

Тоже вариант, не готов сказать что будет быстрее, можно в связке использовать роботс, 301 редирект и 410 ошибку

410 ошибка создаётся так (в файле htaccess)

RewriteEngine On

RewriteCond %{REQUEST_URI} /(.*)

RewriteRule (.*) http://www.x1.y1.ru$1 [R=410,L]

где x1 - поддомен y1 - основной доме

---------- Добавлено 13.11.2019 в 13:13 ----------

donc:
Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

Пока страницы уйдут из индекса - пройдет время, на это время пользователи будут перебрасываться на основной домен. Разве это плохо?

donc
На сайте с 16.01.2007
Offline
637
#6
tekseo:
Пока страницы уйдут из индекса - пройдет время, на это время пользователи

Мдя. Откуда посетители на зеркале? Может почитать про зеркала?

Gera1:
заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом.

Что еще нового расскажете?

Алексей Питерский
На сайте с 23.02.2009
Offline
543
#7
donc:
отдавать ботам 410 ошибку будет вернее

лучше как скайнет уничтожали во втором терминаторе)))

Snake800
На сайте с 02.02.2011
Offline
166
#8
tekseo:
можно в связке использовать роботс, 301 редирект и 410 ошибку

Ну ладно ещё с принципами robots.txt можно тупить. Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

Идите на хуй.
donc
На сайте с 16.01.2007
Offline
637
#9
Snake800:
Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

версия одна - надо смотреть когда там каникулы в школе.

Z0
На сайте с 03.09.2009
Offline
730
#10
donc:
версия одна - надо смотреть когда там каникулы в школе.

Закончились на той неделе :)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий