robots.txt

123 4
Shlackbaum
На сайте с 18.08.2010
Offline
322
#11
8e3yn4ik:
как заливать знаю. Тотал командер есть... незнаю где файл sitemap.xml находится)))

Ооо....

1. http://ru.wikipedia.org/wiki/Sitemaps

2. http://help.yandex.ru/webmaster/?id=1007070

3. http://www.xml-sitemaps.com/

Вы бы хоть немного матчасть почитали

Пустота. Какого черта здесь появляется чья-то реклама?
83
На сайте с 08.11.2010
Offline
4
#12

ппц, да все я это знаю... установлен то щас в какой папке он у меня я хз

http://bma.ua/index.php?option=com_xmap&sitemap=1&view=xml

и вообще в яндекс вебмастере все норм и так находит какая разница какой путь... ну не в главной директории, все-равно нашел же его, значит работает

8e3yn4ik добавил 11.11.2010 в 18:37

Shred:
попробуйте другой браузер, перед этим проверьте грузится ли в ваш браузер и работает ли хостинг. Так же файл\страница может отдаваться за запрос, но код ответа отличен от http 200, в моём случае было http 500/ Хотя страницы прорисовывались. А иначе вам с апорт яши.

вот это главный вопрос, у меня трабла с Главной страницей... код ответа возвращает не 200, немогу никак разобраться че там не так

8e3yn4ik добавил 11.11.2010 в 18:42

Научитесь играть в покер, не вкладывая собственных денег! Получите бонус в $50 от PokerStrategy.com! (http://ru.pokerstrategy.com/#uPN97T)
vetlik
На сайте с 01.07.2010
Offline
133
#13

Между Host и Sitemap уберите пустую строку.

Вообще все строки Disallow уберите.

Разработчики Джумлы почему то считают, что эти папки обязательно нужно закрывать от индексации. На самом деле поисковик сам прекрасно знает, что на вашем сайте стоит индексировать, а что нет.

Рекомендую быть лаконичным:

User-agent: *

Host: bma.ua

Sitemap: http://bma.ua/index.php?option=com_x...map=1&view=xml

83
На сайте с 08.11.2010
Offline
4
#14

Все равно...

imho-no
На сайте с 07.04.2008
Offline
186
#15
8e3yn4ik:
Тотал командер есть...

лучше уж файлзиллу тогда. тотал - не лучший фтп-клиент

8e3yn4ik:
незнаю где файл sitemap.xml находится

сделать новый в любом онлайн сервисе - НЕ?

ps. все радуются за ваш монитор и скрины в 1280 пикселей, ога.

Я - советский пионер. Надо переводить бабушек через дорогу и Бога - нет. юзаю этот хостинг http://ipipe.ru/?pid=16015 (http://ipipe.ru/?pid=16015). полёт нормальный!
83
На сайте с 08.11.2010
Offline
4
#16

да не в этом трабла, тут чето другое....

Не удалось загрузить robots.txt.

vetlik
На сайте с 01.07.2010
Offline
133
#17

sitemap.xml - для яндекса лишнее.

он и сам нормально все страницы находит.

vetlik добавил 11.11.2010 в 18:48

8e3yn4ik:

Не удалось загрузить robots.txt.

Эти строки удалите

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Allow: /images/stories

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Clean-param: font-size&view&limit&month&year&cat_id&fuck&FontSize

Crawl-delay: 0.5

vetlik добавил 11.11.2010 в 18:50

у вас Яндекс не видит robots.txt, потому что стоит 301 редирект с сайта с www на сайт без www.

У вас в панели добавлен сайт www.bma.ua, а не bma.ua

niceteam
На сайте с 20.02.2009
Offline
55
#18

У вас joomla, если вы не знаете чем управляется ЧПУ, значит оно вообще ничем не управляется, следовательно адрес sitemap корявый, поставьте последнюю версию sh404 и xmap

niceteam добавил 11.11.2010 в 19:30

vetlik:
На самом деле поисковик сам прекрасно знает, что на вашем сайте стоит индексировать, а что нет.]

А, мы то мучаемся составляя robots, а тут вон оно что!

S
На сайте с 28.10.2005
Offline
319
#19
8e3yn4ik:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Clean-param: font-size&view&limit&month&year&cat_id&fuck&FontSize
Crawl-delay: 0.5
Host: www.bma.ua

Sitemap: http://bma.ua/index.php?option=com_xmap&sitemap=1&view=xml


в яндексе захожу в анализ robots.txt и неполучается загрузить его, хз мож че нетак, подскажите и вообще норм роботс у меня, мож еще че добавить

Нормальный у вас роботс

Host: www.bma.ua - а стоит редирект на bma.ua

83
На сайте с 08.11.2010
Offline
4
#20

да, проблема была в .htaccess редирект убрал, все теперь нормально, пусть будет без него

8e3yn4ik добавил 12.11.2010 в 10:25

и остановился на таком варианте robots:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Allow: /images/stories
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Clean-param: font-size&view&limit&month&year&cat_id&fuck&FontSize
Crawl-delay: 0.5
Host: bma.ua
Sitemap: http://bma.ua/index.php?option=com_xmap&sitemap=1&view=xml

8e3yn4ik добавил 12.11.2010 в 10:29

niceteam:
У вас joomla, если вы не знаете чем управляется ЧПУ, значит оно вообще ничем не управляется, следовательно адрес sitemap корявый, поставьте последнюю версию sh404 и xmap

niceteam добавил 11.11.2010 в 19:30


А, мы то мучаемся составляя robots, а тут вон оно что!

XMAP стоит )

123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий