Ошибки при индексации

87

danilweb26

19 августа 2009, 01:42

744

Заметил что-то странное в последнее время, бот яши ходит по моему дору, а ему выдается ошибка 304, а при запросе robots.txt ошибка 208, странно. Но самое странное, что гугл ходит по этим же страницам и все ок. В чем может быть проблема? Из-за этой ошибки доры все в бан попали и новые не хотят индексироваться! Хостинг - firstvds, хотя побывал на другом хосте, такие же проблемы!

Изготовление интернет-магазинов «под ключ» от 20000 рублей! (/ru/forum/839337)

L

3

laedafess

19 августа 2009, 02:40

#1

/ru/forum/278420

87

danilweb26

19 августа 2009, 03:28

#2

laedafess:
/ru/forum/278420

1.Он у меня ходил по страницам, а не по картинкам.

2.Раньше такого не было, всегда выдавался ответ 200.

3.I бот Яндекса приходит впервые, вот из-за этой 304 и не хотят лезть доры и сайты в индекс.

Яндекс кобласит Google Updates - апдейты Google не сканирует страницу

43

entropy

19 августа 2009, 03:31

#3

А ты внеси изменения в пару страничек, и погляди какой код на них будет.

213

Pentium Prescott

19 августа 2009, 08:27

#4

Яндекс и картнки индексирует

Покупка и продажа криптовалют ( https://www.bestchange.ru/?p=1296834 )

87

danilweb26

19 августа 2009, 08:39

#5

Pentium Prescott:
Яндекс и картнки индексирует

Само собой, но сейчас речь о страницах, внес изменения, т.е. заново дор сгенерировал и все-равно яша заходит и ему 304.

43

entropy

19 августа 2009, 08:59

#6

danilweb26:
Само собой, но сейчас речь о страницах, внес изменения, т.е. заново дор сгенерировал и все-равно яша заходит и ему 304.

Внимательно логи смотрел?

Если дата модификации страниц новая, то сервер вначале ответит 200-м кодом. А потом, при повторном заходе 304-м. Читай про заголовок If-Modified-Since.

С незапамятных времен бот яндекса так работает, что в этом ненормального ты разглядел?

VK приобрела 70% в структуре компании-разработчика red_mad_robot

Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта