Проблема с robots.txt

12
nikbikey
На сайте с 30.12.2009
Offline
36
763

Вообщем такая проблема: robots.txt не видят сервисы анализа сайтов.:(

http://pr-cy.ru/analysis/vwebe.com

Хотя Яндекс и Гугл отлично видят файл robots.txt

В чём может быть проблема?

[Удален]
#1

Ничего страшного.

sokolenko
На сайте с 06.06.2010
Offline
67
#2

Может сервисы немного "тупят". Главное, чтобы в панели вебмастера Яндекса и WMT все было на месте.

nikbikey
На сайте с 30.12.2009
Offline
36
#3
sokolenko:
Может сервисы немного "тупят".

Все сразу? Не один же PR-CY показывает так!

Кстати так стало после того как мне сделали внутреннею оптимизацию (месяца три назад)

somefork
На сайте с 16.08.2008
Offline
99
#4

проблема в .htacces

В нём видимо стоит перенаправление.

Попробуйте руками в браузере открыть. Если перекидывает, то я прав.

Ремонтостан (http://remontostan.com)
[Удален]
#5

Вот записи вашего файла.

User-agent: *

Disallow: /*print

Disallow: /backup/

Disallow: /engine/

Disallow: /language/

Disallow: /templates/

Disallow: /upgrade/

Disallow: /uploads/

Disallow: /autobackup.php

Disallow: /admin.php

Disallow: /index.php?do=addnews

Disallow: /index.php?do=feedback

Disallow: /index.php?do=lostpassword

Disallow: /index.php?do=pm

Disallow: /index.php?do=register

Disallow: /index.php?do=stats

Disallow: /index.php?do=search

Disallow: /index.php?subaction=newposts

Disallow: /?do=lastcomments

Disallow: /statistics.html

Host: _vwebe.com

Могу сделать предположение, что команда Host: vwebe.com должны быть закреплена за определенным User-agent (ya, rambler или google). А так как написано у вас не совсем по стандарту.

nik_kent
На сайте с 05.02.2008
Offline
178
#6
somefork:
проблема в .htacces
В нём видимо стоит перенаправление.
Попробуйте руками в браузере открыть. Если перекидывает, то я прав.

А Вам видимо проще написать глупость, чем открыть руками в браузере и увидеть, что Вы не правы?

nikbikey, be1.ru видит нормально, значит все нормально.

У Яндекса тоже нет роботса, кто им напишет и скажет об этом? :)

С уважением, Николай.
nikbikey
На сайте с 30.12.2009
Offline
36
#7

nik_kent, ну да. Некоторые сервисы находят robots.txt, а некоторые нет!:(

Я хотел бы разобраться в чём проблема. Очень интересно.:)

nik_kent
На сайте с 05.02.2008
Offline
178
#8
nikbikey:
Я хотел бы разобраться в чём проблема. Очень интересно.

Проблема в сервисе.

nikbikey
На сайте с 30.12.2009
Offline
36
#9

nik_kent, тогда всё понятно. Спасибо за помощь!

orphelin
На сайте с 02.07.2006
Offline
261
#10
nik_kent:
У Яндекса тоже нет роботса, кто им напишет и скажет об этом?

зато так http://pr-cy.ru/analysis/yandex.ru работает

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий