Запрет на доступ роботу-"простукивалке" Яндекс.Каталога. Как?

lexismart
На сайте с 27.12.2004
Offline
59
1447

Нужно убрать сайт из ЯК. Вот что пишет саппорт:

В этом случае мы можем порекомендовать Вам установить запрет на доступ роботу-"простукивалке" Яндекс.Каталога. Получив от сайта отклик, отличный от нормального, "простукивалка" снимет его с публикации.

Как это реализовать?

BL
На сайте с 05.12.2009
Offline
71
#1

User-agent: YandexCatalog

Disallow: /

---------- Добавлено 13.09.2012 в 12:02 ----------

В роботсе пропишите

Магазин аккаунтов с балансом Litres,DNS,Ozon,Rotapost и еще 50+ других сервисов тут - vk.cc/7QK0Sk
lexismart
На сайте с 27.12.2004
Offline
59
#2
ByLex:
User-agent: YandexCatalog
Disallow: /
В роботсе пропишите

Спасибо большое)🍿

Rimlyanin
На сайте с 22.02.2006
Offline
200
#3
ByLex:
User-agent: YandexCatalog
Disallow: /

---------- Добавлено 13.09.2012 в 12:02 ----------

В роботсе пропишите

А разве дятел смотрит роботс?

Я бы делал через .htaccess

BL
На сайте с 05.12.2009
Offline
71
#4

Rimlyanin, Смотрит

SBot
На сайте с 29.07.2008
Offline
115
#5
lexismart:
Нужно убрать сайт из ЯК. Вот что пишет саппорт:

В этом случае мы можем порекомендовать Вам установить запрет на доступ роботу-"простукивалке" Яндекс.Каталога. Получив от сайта отклик, отличный от нормального, "простукивалка" снимет его с публикации.

Как это реализовать?

404 ответ от сервера нужен.

если точнее, то любой отличный от 200.

Правила описания и публикации ресурсов


Ежедневно сайты, размещенные в Каталоге, проверяются на "живость" специальной программой-простукивалкой. Если более трех раз при обращении к сайту сервер отвечает кодом, отличным от 200, то сайт снимается с публикации. При этом из базы сайт сразу не удаляется, и при получении простукивалкой нормального отклика (HTTP-статус 200) автоматически возвращается на публикацию.
Апокалипсис
На сайте с 02.11.2008
Offline
391
#6

Интересно, а зачем такая задача нужна?

Записки нищего (http://zapiskinishego.ru) - мой личный блог Услуги php программиста. Очень нужна любая работа. Не покупают? Поведенческий аудит интернет-магазина за 5000 руб. (/ru/forum/990312)
Rimlyanin
На сайте с 22.02.2006
Offline
200
#7
ByLex:
Rimlyanin, Смотрит

Хм, ни разу не видел, что бы дятел к роботсу обратился...

И все равно я за то, что бы в .htaccess прописать правило для mod_rewrite, по которому нужному юзерагенту будет отдано 404...

G
На сайте с 14.01.2012
Offline
60
#8

Большому колличеству вебмастеров отказывают в платном размещении в каталоге, а здесь интересная ситуация, человек сам хочет удалить свой сайт из каталога, интересно бы узнать причину)))

lexismart
На сайте с 27.12.2004
Offline
59
#9

Просто есть два сайта организации..один (старый, в ЯК), второй (новый, не в ЯК)..раскручены оба, нужно было новый в ЯК пихнуть без денег...и оставить старый рабочим.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий