Робот.тхт для Яндекса - не слишком ли увесист?

NS
На сайте с 22.03.2009
Offline
56
1550

Достался мне клиент с сайтом от одного "лучшего сеошника города", который уехал в Москву. На сайте есть робот.тхт. Смотрю я на этот шедевр, и не покидает меня мысль, что слишком много там накручено для запрета индексации.

Сам я в роботах не силен, ибо надобности в них особой никогда не было. Так... Запретил пару разделов и все. Оцените коллеги:

User-agent: Yandex

Disallow: /.htaccess

Disallow: /administrator/

Disallow: /awstats/

Disallow: /backup/

Disallow: /cache/

Disallow: /CHANGELOG.php

Disallow: /configuration.php

Disallow: /configuration.php-dist

Disallow: /COPYRIGHT.php

Disallow: /descript.ion

Disallow: /editor/

Disallow: /globals.php

Disallow: /globals.php-off

Disallow: /help/

Disallow: /images/apply_f2.png

Disallow: /images/archive_f2.png

Disallow: /images/back_f2.png

Disallow: /images/banners/

Disallow: /images/blank.png

Disallow: /images/cancel.png

Disallow: /images/cancel_f2.png

Disallow: /images/css_f2.png

Disallow: /images/edit_f2.png

Disallow: /images/html_f2.png

Disallow: /images/index.html

Disallow: /images/joomla_logo_black.jpg

Disallow: /images/M_images/

Disallow: /images/menu_divider.png

Disallow: /images/new_f2.png

Disallow: /images/powered_by.png

Disallow: /images/preview_f2.png

Disallow: /images/publish_f2.png

Disallow: /images/publish_x.png

Disallow: /images/save.png

Disallow: /images/save_f2.png

Disallow: /images/smilies/

Disallow: /images/stories/

Disallow: /images/tick.png

Disallow: /images/unarchive_f2.png

Disallow: /images/unpublish_f2.png

Disallow: /images/upload_f2.png

Disallow: /includes/

Disallow: /index2.php

Disallow: /INSTALL.php

Disallow: /language/

Disallow: /LICENSE.php

Disallow: /links/.htaccess

Disallow: /links/_admin/

Disallow: /links/_constants.php

Disallow: /links/_shell/

Disallow: /links/autobot/

Disallow: /links/readme.txt

Disallow: /links/tpl/

Disallow: /mainbody.php

Disallow: /mambots/

Disallow: /media/

Disallow: /modules/

Disallow: /offline.php

Disallow: /offlinebar.php

Disallow: /pathway.php

Disallow: /templates/

Disallow: /components/

Disallow: /index.php?

Не слишком ли много запретов? Что нужно обязательно оставить, а что убрать к чертовой матери, например?

Спасибо.

Продвигаю сайты (http://istudio61.ru/) в Яндексе по 61 региону.
A2
На сайте с 17.11.2009
Offline
52
#1

а зачем картинки запрещать к индексации? :(

NS
На сайте с 22.03.2009
Offline
56
#2

Понятия не имею. Видимо чтобы больше внимания тексту уделялось.

sergey.gsm
На сайте с 07.11.2009
Offline
52
#3

Файл мал, не велик для Я.

Только зачем столько запрещено?

По всей видимости, это джумла.

Если на джумле сделан интернет-магазин, то многое зря.

А так - хер знает.

Может есть чего скрывать людям...

NS
На сайте с 22.03.2009
Offline
56
#4

Нет, не магазин. Просто сайт компании с каталогом подробным. Онлайн покупки не оформляются.

Mr.k
На сайте с 01.07.2009
Offline
94
#5

А на каком движке? Или самописный?

На 3 вещи можно смотреть вечно: как льется вода, как горит огонь и как работает... БОТ (http://www.humanemulator.info/?a_aid=mrk).
sergey.gsm
На сайте с 07.11.2009
Offline
52
#6
Mr.k:
А на каком движке? Или самописный?

Да джумла, приглядись...

NS
На сайте с 22.03.2009
Offline
56
#7

Джумла. Выше верно сказали.

sergey.gsm
На сайте с 07.11.2009
Offline
52
#8

Ну а дальше уже говорить о чем то очень сложно - так сказать, сайт в студию...

igorus11
На сайте с 03.05.2008
Offline
86
#9

по сути тебе нужно просто удалить configuration.php-dist чтобы нельзя было определить билд джумлы

файлик там совсем не нужен

а в остальных папках лежит дефолтовый index.html

имхо совсем не нужно все это городить.

а если хочешь закрыть админку (/administrator)

для этого есть масса плагинов (скрытие пути к админке)

delpher
На сайте с 29.01.2007
Offline
139
#10

много лишнего.

Disallow: /images/back_f2.png

Disallow: /images/banners/

Disallow: /images/blank.png

...

можно просто

Disallow: /images/

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий