Host: или черти - что...

12 3
E
На сайте с 11.08.2007
Offline
34
1509

Получил от Платонов ответ:

> Прошло уже 2 месяца, а главное зеркало никак не определяется.

> User-agent: *

> Disallow:

>

> User-agent: Yandex

> Disallow:

> Host: www.lovefree.us

Дело в том, что /robots.txt у Вас составлен с ошибкой, вот робот его и не

понимает. Директива Host должна идти _после_ User-agent. Проверить, как робот

Яндекса понимает Ваш /robots.txt, можно здесь:

http://www.yandex.ru/cgi-bin/test-robots

Никаких стандартов блин:no:

Антикризисная покупка и продажа слонов (http://www.slons.ru/?ref=web)
Exayder
На сайте с 25.06.2007
Offline
23
#1

Так а у Вас как?

Просто у меня тоже проблема, с определением главного зеркала, уже 1,5 месяца яндекс никак не разберётся.

Информационный портал о рекламе (http://peklamka.com/) | Всё о КПК, FAQ, история (http://propda.net/)
AVV
На сайте с 31.07.2006
Offline
84
AVV
#2

Абсолютно правильный ответ платонов Яндекса.

Директива Host должна идти после User-agent, а не до него.

Также как и директива Crawl-delay, кстати. ;) :)

Exayder
На сайте с 25.06.2007
Offline
23
#3
AVV:
Абсолютно правильный ответ платонов Яндекса.

Директива Host должна идти после User-agent, а не до него.

Также как и директива Crawl-delay, кстати. ;) :)

Приведите пример, пожалуйста.

T
На сайте с 11.08.2005
Offline
181
#4
AVV:
Абсолютно правильный ответ платонов Яндекса.
Директива Host должна идти после User-agent, а не до него.
Также как и директива Crawl-delay, кстати. ;) :)

Конструкция типа:

User-agent: Yandex

Disallow:
Host: www.site.ru

вполне корректно определяется Яндексом (также это видно и по http://www.yandex.ru/cgi-bin/test-robots).

О том, что директива "Host" идет перед User-agent, насколько я понял, речи не идет.

Esco, если файл robots.txt на момент ответа был в точности таким, как Вы написали в Вашем первом посте, тогда ответ поддержки мне не понятен.

Dmitry V___v
На сайте с 07.12.2006
Offline
310
#5
Esco:
Получил от Платонов ответ:
> Прошло уже 2 месяца, а главное зеркало никак не определяется.
> User-agent: *
> Disallow:
>
> User-agent: Yandex
> Disallow:
> Host: www.lovefree.us
Дело в том, что /robots.txt у Вас составлен с ошибкой, вот робот его и не
понимает. Директива Host должна идти _после_ User-agent. Проверить, как робот
Яндекса понимает Ваш /robots.txt, можно здесь:
http://www.yandex.ru/cgi-bin/test-robots

Никаких стандартов блин🙅

Дык это - молодой Платон попался :)

Неопытный еще...

Создание и ведение кампаний Google/Bing/Twitter/FB Ads под USA, Canada, United Kingdom and Australia ( https://searchengines.guru/ru/forum/1028286 ) + жирный линкбилдинг под бурж ( https://searchengines.guru/ru/forum/1028282 )
Exayder
На сайте с 25.06.2007
Offline
23
#6
Timen:

Esco, если файл robots.txt на момент ответа был в точности таким, как Вы написали в Вашем первом посте, тогда ответ поддержки мне не понятен.

Вот и я о том же говорю. У меня у самого так написано в файле robots.txt

AVV
На сайте с 31.07.2006
Offline
84
AVV
#7
Exayder:
Приведите пример, пожалуйста.

Пример уже привел Timen в посте #5. ;)

Exayder:
Вот и я о том же говорю. У меня у самого так написано в файле robots.txt

И что? Вам тоже был такой ответ саппорта Яндекса, как пишет ТС?

Exayder
На сайте с 25.06.2007
Offline
23
#8

Вот, как у меня написано в роботсе:

User-agent: Yandex

Disallow: /cgi-bin
Disallow: /admin.php
Disallow: /admin/
Disallow: /includes/
Disallow: /themes/
Disallow: /language/
Host: peklamka.com

Подскажите профи, что здесь не правельно.

AVV:
И что? Вам тоже был такой ответ саппорта Яндекса, как пишет ТС?

Нет, я в саппорт пока не писал. Но у меня в роботсе написано также как у ТС.

AVV
На сайте с 31.07.2006
Offline
84
AVV
#9

Exayder

У вас правильно.

А у него было (у ТС), также правильно, как у вас? Вы ручаетесь? ;)

T
На сайте с 11.08.2005
Offline
181
#10

Exayder, а почему Вы просто не "спросите" у Яндекса: http://www.yandex.ru/cgi-bin/test-robots?host=peklamka.com

Как по мне - то все правильно.

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий