Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Проблема с robots.txt которого вообще нету

B
На сайте с 02.04.2008
Offline
250
Blazon
431

Из индекса вылетели страницы , Гугль Вебмастер пишет "Невозможно получить доступ к файлу robots.txt " . Читал где то, что если ничего не надо запрещать то и robots.txt не нужен, вот тут http://robotstxt.org.ru/ пишут что надо пустой файл выложить или все таки надо что то прописать ? зеркала www и без, в Гугле и в Яше поклеены

K
На сайте с 31.01.2001
Offline
737
Kost
#1

На обращение к /robots.txt должен выдаваться код 200 или 404. Проверьте, что у вас.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
B
На сайте с 02.04.2008
Offline
250
Blazon
#2
Kost:
На обращение к /robots.txt должен выдаваться код 200 или 404. Проверьте, что у вас.

404 Not Found

The requested URL /robots.txt was not found on this server.

K
На сайте с 31.01.2001
Offline
737
Kost
#3

Тогда это не может быть причиной проблем.

B
На сайте с 02.04.2008
Offline
250
Blazon
#4
Kost:
Тогда это не может быть причиной проблем.

я тоже на хостера сначала подумал , но он клянется что суточных простоев не было, да и траф все последние дни пропал только с Гугля

kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#5

Blazon, причём тут robots и хостер?

Может у вас на сайте линкопомойка или ещё что-нибудь плохое есть?

B
На сайте с 02.04.2008
Offline
250
Blazon
#6
kimberlit:
Blazon, причём тут robots и хостер?
Может у вас на сайте линкопомойка или ещё что-нибудь плохое есть?

Сайт белый , единственная "линкопомойка" это 7 счетчиков на одной странице

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий