Как полностью удалить сайт из индексации?

12
G1
На сайте с 18.03.2019
Offline
12
767

Всем привет, кто знает, как можно ускорить процесс удаления сайта из индексации test.site.ru. Создали тестовую версию для разработки не закрытую от индексации, заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом. Сейчас поддомен удалили, но он до сих пор индексируется и мешает индексации основного домена, создавая конкуренцию и сильно снижая его позиции.

X
На сайте с 04.12.2018
Offline
279
#1

Загрузите на поддомен robots.txt с содержанием:

User-agent: *
Disallow: /

+ в webmaster yandex отправить на удаление.

Довольно быстро вывалится.

Удобный съем позиций (http://allpositions.ru/redirect/58277)
donc
На сайте с 16.01.2007
Offline
663
#2

отдавать ботам 410 ошибку будет вернее

Осуждаем применение нейросетей в SEO и не только ( https://webimho.ru/forum/148/ ) :) Продвижение сайтов от 25 000 в мес, прозрачно, надежно ( /ru/forum/818412 ), но не быстро, отзывы ( http://webimho.ru/topic/3225/ )
T
На сайте с 24.10.2011
Offline
63
#3

Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен - так вы получите тех пользователей, которые перейдут на него из страниц поиска.

donc
На сайте с 16.01.2007
Offline
663
#4
tekseo:
Про robots.txt правильно сказали + создайте 301 переадресацию на основной домен

Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

T
На сайте с 24.10.2011
Offline
63
#5
donc:
отдавать ботам 410 ошибку будет вернее

Тоже вариант, не готов сказать что будет быстрее, можно в связке использовать роботс, 301 редирект и 410 ошибку

410 ошибка создаётся так (в файле htaccess)

RewriteEngine On

RewriteCond %{REQUEST_URI} /(.*)

RewriteRule (.*) http://www.x1.y1.ru$1 [R=410,L]

где x1 - поддомен y1 - основной доме

---------- Добавлено 13.11.2019 в 13:13 ----------

donc:
Откуда же вы ползете то... Причем кучно так пошли. Если в роботсе будет стоять запрет - зачем тогда 301 редерикт?

Пока страницы уйдут из индекса - пройдет время, на это время пользователи будут перебрасываться на основной домен. Разве это плохо?

donc
На сайте с 16.01.2007
Offline
663
#6
tekseo:
Пока страницы уйдут из индекса - пройдет время, на это время пользователи

Мдя. Откуда посетители на зеркале? Может почитать про зеркала?

Gera1:
заметили только когда поддомен стал определяться как зеркало сайта с дублирующим контентом.

Что еще нового расскажете?

Алексей
На сайте с 23.02.2009
Offline
572
#7
donc:
отдавать ботам 410 ошибку будет вернее

лучше как скайнет уничтожали во втором терминаторе)))

Программирование на ПХП для сайтов на MODX - автоматизация, парсинг, автоматическое наполнение, формы заказов с расчетом цен и парсингом. Программирование функционала, которого нет в паблик решениях. Все вопросы в личку - отвечу смогу или нет, сроки и цены, условия.
Snake800
На сайте с 02.02.2011
Offline
215
#8
tekseo:
можно в связке использовать роботс, 301 редирект и 410 ошибку

Ну ладно ещё с принципами robots.txt можно тупить. Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

donc
На сайте с 16.01.2007
Offline
663
#9
Snake800:
Но КАК можно запихать ДВА разных кода ответа в ОДНО целочисленное значение?

версия одна - надо смотреть когда там каникулы в школе.

Z0
На сайте с 03.09.2009
Offline
756
#10
donc:
версия одна - надо смотреть когда там каникулы в школе.

Закончились на той неделе :)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий