Ошибка роботс

12
Ушат
На сайте с 19.09.2012
Offline
95
1071

Пришла месага в гугл вебмастерс:

робот Googlebot не может получить доступ к вашему сайту

Число ошибок за последние 24 ч. при попытке робота Googlebot получить доступ к файлу robots.txt: 1. Чтобы исключить сканирование страниц, доступ к которым заблокирован в этом файле, сканирование было отложено. Общая доля ошибок при попытке доступа к файлу robots.txt на сайте: 33.3%.

Собственно

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /component/

Disallow: /index2.php

Disallow: /index.php

Disallow: /*tag

Disallow: /*=atom

Disallow: /*=rss

Disallow: /*.pdf$

Disallow: /*?sl*

Disallow: /itemlist/

Disallow: /tag/

Host: www.MySite.com

Sitemap: http://www.MySite/site-map.xml

В чем может быть трабла, как исправить?

С уважением Ушат

НЕ нажимать (). не ходите сюда (http://orteil.dashnet.org/cookieclicker/) ибо проклятие требует чью-либо душу в замен моей
Ушат
На сайте с 19.09.2012
Offline
95
#1

В виду чрезвычайной важности, позволю себе апнутть тему

KtoTut
На сайте с 03.12.2012
Offline
5
#2

Сложно так сказать, надо сам роботс смотреть(на сайте).

Возможно хостер забанил айпишник гугловского бота и он теперь не может получить доступ к файлу. В вебмастере можно ведь проверить все директивы и доступность нужных страниц

Уверен что хочешь спросить?
Ушат
На сайте с 19.09.2012
Offline
95
#3
KtoTut:
Сложно так сказать, надо сам роботс смотреть(на сайте).
Возможно хостер забанил айпишник гугловского бота и он теперь не может получить доступ к файлу. В вебмастере можно ведь проверить все директивы и доступность нужных страниц

Страницы доступны , недоступен сам роботс поэтому сканирование отложено

дани мапов
На сайте с 06.09.2012
Offline
204
#4

Без адреса сайта трудно сказать

Написание и доработка скриптов (PHP, MySQL, JavaScript, jQuery) (/ru/forum/811046)
KtoTut
На сайте с 03.12.2012
Offline
5
#5

Можно в личку сайт, посмотрю

Ушат
На сайте с 19.09.2012
Offline
95
#6
дани мапов:
Без адреса сайта трудно сказать

отправил в личку

siv1987
На сайте с 02.04.2009
Offline
427
#7

Сканирования происходит и без доступности роботса, там что-то про исключения заблокированных страниц говорится

iren K
На сайте с 28.12.2008
Offline
222
#8

по-ходу вы закрыли от бота весь сайт(возможно в Disallow: /templates/)

- и почему у вас sitemap через дефис (..http://www.MySite/site-map.xml)?

c уважением Iren
Ушат
На сайте с 19.09.2012
Offline
95
#9
iren K:
по-ходу вы закрыли от бота весь сайт(возможно в Disallow: /templates/)
- и почему у вас sitemap через дефис (..http://www.MySite/site-map.xml)?

Сайт на Joomla. насколько мне известно TEmplates - шаблон.

а насчет сайт-мапа . Почему бы и нет?

KtoTut
На сайте с 03.12.2012
Offline
5
#10
Ушат:
отправил в личку

А ничего не пришло, видимо ограничения по сообщениям

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий