Adsense и robots.txt

R
На сайте с 15.07.2012
Offline
44
1013

Начал работу с AdSense и в показателях у меня появился красный восклицательный знак, что робот AdSense не может получить доступ к некоторым страницам на сайте, потому-что это запрещено в robotx.txt. Зашел в справку увидел это:

https://support.google.com/adsense/answer/10532?hl=ru

Зашел в robots, действительно запрещено. Изменил и поставил эти две строки в самый верх robots.txt, чтобы открыть именно роботу AdSense.

Эти строки:

User-agent: Mediapartners-Google
Disallow:

Прошло 2 дня и теперь у меня дальше красный прямоугольник и вот, что пишет:

В двух словах: "Наш веб-сканер не смог получить доступ к вашей странице... возможны показы нерелевантных объявлений или вообще рекламные баннеры не будут появляться.

Это выходит, что я запретил их роботу в своем robots сканировать сайт или что я не так сделал?

Английский язык я знаю и прекрасно понимаю, что disallow - это запрещать. Выходит, что гугл в справке ошибся? Разве не должно быть Allow: /?

I
На сайте с 24.10.2007
Offline
93
#1

лучше разрешить всем роботам, чем что-то запрещать, так вопросов и путаницы будет меньше, а критичный контент спрятать другим способом

I
На сайте с 04.06.2010
Offline
81
#2
rones:
Выходит, что гугл в справке ошибся? Разве не должно быть Allow: /?

То что вы написали - равнозначная запись совета Гугла (справка Яндекса дает следующее):

Директивы Allow-Disallow без параметров.

Отсутствие параметров у директивы трактуется следующим образом:

User-agent: Yandex

Disallow: # то же, что и Allow: /

User-agent: Yandex

Allow: # то же, что и Disallow: /

(источник: http://help.yandex.ru/webmaster/?id=996567#996571)

А по поводу Вашей текущей ситуации - просто подождите 3-4 дня. Обычно в течение этого периода робот гугла успеет Вас посетить в очередной раз и "съест" новый роботс.

Всё, что не убивает, делает Вас сильнее (c) Платон Щукин

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий