Закрыл от индексации - сайт всеравно висит!

G
На сайте с 07.09.2008
Offline
124
493

Закрыл сайт от индексации в гугле правилом в роботс

User-agent: Googlebot

Disallow: /

Плюс еще в коде сайта прописал

if (strpos($_SERVER['HTTP_USER_AGENT'],"Google")!==false) exit();

Все изменения сделал недели 2 назад. Но сайт все попрежнему висит в гугле. Данные в кэше гугла от 27.05 еще. Почему сайт не снимается с выдачи? Продолжать ждать?

Mik Foxi
На сайте с 02.03.2011
Offline
1206
#1

в вебмастере гугла можно быстро удалить закрытое в роботсе. а так он еще и 3 месяца может висеть.

Антибот, антиспам, веб фаервол, защита от накрутки поведенческих: https://antibot.cloud/ (Зеркало: https://антибот.рф/ ) Форум на замену серчу: https://foxi.biz/
A
На сайте с 05.08.2011
Offline
34
#2
goacher:

User-agent: Googlebot
Disallow: /

собственно, эта команда не является обязательной (а опциональной) для выполнения роботами Гоши. Так что может еще долго продолжать индексировать. И ждать можно еще долго. И по любому - две недели - это не срок. Я как-то случайно закрыл от индексации страницы - так повылетали из индекса только за месяц....:)

G
На сайте с 07.09.2008
Offline
124
#3

отправил url на удаление в гугле вебмастер

SS
На сайте с 20.01.2013
Offline
44
#4
goacher:
User-agent: Googlebot
Disallow: /

Тут вы запретили индексировать все страницы сайта.

goacher:
if (strpos($_SERVER['HTTP_USER_AGENT'],"Google")!==false) exit();

Тут вы запретили боту гугла сканировать сайт.

Но вы не учли то, что страницы уже находятся в индексе.

Удалить страницы из индекса можно тут

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий