доступ к роботс

[Удален]
523

Чем чревато наличие 500 ошибки при обращению гуглоботом к robots.txt?

Интересно узнать последствия, а не послушать наставления.

S6
На сайте с 06.12.2011
Offline
158
SEO
#1

Ну, нет и нет роботса. Что с того? Примерно такие последствия.

Аудит сайта. Консультации.
[Удален]
#2
SEO66:
Ну, нет и нет роботса. Что с того? Примерно такие последствия.

не аукнется потом трудностями с индексацией? типа, частота посещения ботом сайта будет сокращаться, по мере повторных приходов на сайт.. просто ругается гугл, что бот не может попасть на сайт.ру/роботс.тхт

J4
На сайте с 24.04.2013
Offline
63
#3

Не будет никаких проблем, просто не будут учитываться рекомендации, которые в роботсе указаны (т.к. он не доступен).

A5
На сайте с 22.04.2013
Offline
7
#4

нет доступа к robots, нет специальных инструкций для бота.вот и все.

а проблем никаких не будет.

Denxx
На сайте с 30.01.2011
Offline
49
#5

А тот факт что сайт отдает ошибки роботу (500) вы не учитываете? Это же влияет на индексацию и на позиции тоже. Плохой хостинг/конфигурация это плохо.

Милованов Ю.С
На сайте с 24.01.2008
Offline
196
#6

500 это ваще то Internal Server Error, а это плохо для сайта!

Подпись))
[Удален]
#7

psyho000freak, ну скорей всего тем что, он не будет нечего индексировать, а это плохо

Mish-ka
На сайте с 08.06.2011
Offline
414
#8
psyho000freak:
Чем чревато наличие 500 ошибки при обращению гуглоботом к robots.txt?

А все остальное нормально отдается?

Без пятисотых?

Серч уже не торт => https://se.guru
[Удален]
#9
Mish-ka:
А все остальное нормально отдается?
Без пятисотых?

да. остальные в порядке.

---------- Добавлено 28.05.2013 в 10:16 ----------

xegen:
psyho000freak, ну скорей всего тем что, он не будет нечего индексировать, а это плохо

я тоже так думаю. По идее раз робот натыкается на ошибку, то начинает реже посещать сайт, что приводит к увеличению срока индексации

samimages
На сайте с 31.05.2009
Offline
427
#10

Интересно чего вы там понаписали аж 500-ую. Показали бы...

---------- Добавлено 28.05.2013 в 11:30 ----------

psyho000freak:
да. остальные в порядке.

---------- Добавлено 28.05.2013 в 10:16 ----------


я тоже так думаю. По идее раз робот натыкается на ошибку, то начинает реже посещать сайт, что приводит к увеличению срока индексации

500 - это ошибка сервера, а не http: запроса. Ваша логика в корне не верна.

Опыт как иммунитет — приобретается в муках! Аудит семантики от 15К [долго] - ЛС

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий