Контекст на закрытом от индексации сайте

S
На сайте с 09.10.2006
Offline
45
738

Всем вечера доброго.

Возник вопрос, который может показаться глупым. Как будет жить контекст (Adsense, РСЯ, Бегун) на сайте, который будет закрыт от индексации через robots.txt или через тэг noindex?

Ответа на этот вопрос через поиск не нашел, поэтому буду очень признателен тем кто сможет на него ответить.

p.s. Пожалуйста не нужно комментов вроде зачем мне закрывать сайт от поисковиков и в таком духе.

upyrj
На сайте с 17.09.2005
Offline
140
#1

А обсуждается вариант не закрывать от индексации ботами соответствующих систем контекстной рекламы (у них отдельные юзер-агенты)?

Денис Иванов Важно: обменом валют я не занимаюсь.
S
На сайте с 09.10.2006
Offline
45
#2

да конечно - для ботов контекста индексацию можно открыть. только я не представляю пока как.

upyrj
На сайте с 17.09.2005
Offline
140
#3

slip, ну типа:

User-agent: Yandex

Disallow: /
Host: www.site.ru

User-agent: Googlebot
Disallow: /

и так далее. Тогда все остальные не попадут под раздачу. 8)

Еще вариант:

User-agent: YaDirectBot

Disallow:

User-agent: *
Disallow: /

Юзерагенты других систем контекста не знаю — надо поискать.

S
На сайте с 09.10.2006
Offline
45
#4

Оу, спасибо. :)

upyrj
На сайте с 17.09.2005
Offline
140
#5

Вдогонку — почитайте этот сайтик:

http://robotstxt.org.ru/RobotsExclusion/guide

Он дюже полезный, хотя иногда немножко отстает от современности. 8)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий