robots отдает 5xx

12
response
На сайте с 01.12.2004
Offline
324
800

я знаю, тема поднималась, согласно поиску по "5xx" три раза, плюс чей-то профайл ))

но ответа я на вопрос не нашел. а именно:

Адрес ** не был внесен в базу Яндекса, так как он запрещен к индексации в файле robots.txt, или при обращении к robots.txt сервер вернул ошибку 5xx.

Как я прочитал, это последствия недавнего апдейта. Но в чем смысл? С дорами борются? Каким образом??

Кто-то высказался, что, мол, пусть сайтик будет посещаем, тогда яшка пропустит его через доро-фильтр.

А что значит "посещаем"? Яшкиных иконок не держу, рамблеровский топ100 тоже. Стало быть, речь идет об учитываемых переходах с серпа?

Т.е. я могу уже идти ломать яшину систему борьбы с накрутками переходов, или как?? :)

Объясните, плиз, или киньте линк, где подробно написано не только "что", но и "зачем" и "как" это все теперь работает.

зы

с момента выкладывания сайта прошло недели две, траф 130-150, 60 процентов с яши, но индексить не хочет, и новые урлы вручную, как видите, не принимает (иначе я бы и не забеспокоился, а ждал бы дальше )))

Однопоточный парсер ключевых слов Магадан (http://magadanparser.ru) (со свистелками) Многопоточный парсер ключевых слов Солнечный (http://sunnyparser.ru) (без свистелок)
6666
На сайте с 10.01.2005
Offline
505
#1
response:
Кто-то высказался, что, мол, пусть сайтик будет посещаем, тогда яшка пропустит его через доро-фильтр

Чушь какая...

И какое отношение имеет код 5хх роботса к посещаемости?

response:
с момента выкладывания сайта прошло недели две, траф 130-150, 60 процентов с яши, но индексить не хочет

То есть сайт не проиндексирован в Яндексе, но 130 человек с него идут?

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
response
На сайте с 01.12.2004
Offline
324
#2
6666:

И какое отношение имеет код 5хх роботса к посещаемости?

вы всегда отвечаете вопросом на вопрос? я именно это и спрашивал. сам не понял. могу кинуть линк на обсуждение, если что.

6666:

То есть сайт не проиндексирован в Яндексе, но 130 человек с него идут?

я не уточнил: проиндексировано 15 страниц, но когда пытаюсь вбить новые страницы через форму, выдает вышеуказанную квоту, поиск по которой и дал тред про доробанилки.

а по топегу можете что-нибудь конкретное сказать? почему эддурл такую мессагу выдает? с чем это связано? раньше не было (я не видел, хотя int. s.e. на robots.txt был). Чем (вдруг) обусловлены столь жесткие требования к robots.txt? к чему имеет отношение код ошибки 5xx на robots.txt?

заранее спасибо.

K. Ermakov
На сайте с 10.12.2004
Offline
328
#3
response:
к чему имеет отношение код ошибки 5xx на robots.txt?

А Вы знаете, что такое код ошибки 5xx в принципе?

С уважением, Константин Ермаков, absite.ru: онлайн кроссворды (http://absite.ru/); searchsuggest.ru: поисковые подсказки доставляют (http://searchsuggest.ru/).
6666
На сайте с 10.01.2005
Offline
505
#4

K. Ermakov, тоже вопросом на вопрос? :)

K
На сайте с 31.01.2001
Offline
737
#5

На запрос robots.txt сервер обязян отдать код 200 (и корректное содержимое) или 404.

Во всех остальных случаях ( например 302 = "пошел нафиг вот туда...", 50x = "ошибка сервера") надеяться на индексацию не следует.

Почитайте RFC про HTTP, там все про коды ошибок написано.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
6666
На сайте с 10.01.2005
Offline
505
#6
Kost:
На запрос robots.txt сервер обязян отдать код 200 (и корректное содержимое) или 404.

Далее: Яндекс не учитывает посещаемость ресурса. Даже если Вы поставите пузомерку ТИЦ.

Так что сломать накруткой "Яшкину систему учета переходов" не получится.

response
На сайте с 01.12.2004
Offline
324
#7
K. Ermakov:
А Вы знаете, что такое код ошибки 5xx в принципе?

аааа, вы тут тоже модератор? да, знаю. а вы знаете, что сео - дело такое?!

почему вдруг robots.txt стал так важен для яндекса? раньше наплевать было, а теперь на тебе. я-то сам не оптимизатор, за темой не слежу, и вот такие конфузы..

СЕО - ДЕЛО ТАКОЕ!! ☝ :D

response
На сайте с 01.12.2004
Offline
324
#8
Kost:
На запрос robots.txt сервер обязян отдать код 200 (и корректное содержимое) или 404.
Во всех остальных случаях ( например 302 = "пошел нафиг вот туда...", 50x = "ошибка сервера") надеяться на индексацию не следует.
Почитайте RFC про HTTP, там все про коды ошибок написано.

всегда индексировал, теперь нет? я склонен считать, что у меня оооочень много раз были 5хх на robots, а не 404, и ничего - индексировались. а теперь фигня какая-то.

response
На сайте с 01.12.2004
Offline
324
#9
6666:
Далее: Яндекс не учитывает посещаемость ресурса. Даже если Вы поставите пузомерку ТИЦ.
Так что сломать накруткой "Яшкину систему учета переходов" не получится.

ну, блоги-то его получилось. вы точно уверены, что не учитывает? ;)))))

6666
На сайте с 10.01.2005
Offline
505
#10

response,

1. Какие блоги?

2. Да, точно уверен.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий