вопрос по роботс.тхт

-=K@tya=-
На сайте с 01.06.2007
Offline
26
453

я составила файл роботс.тхт

User-agent: *

Disallow: /bitrix/

но у меня есть сомнения..нужен ли последний слэш /bitrix/ ?

и есть ли какая нибудь разница если, допустим, я его уберу. это на что нибудь влияет вообще?

Нужно много учиться, чтобы хоть немного знать! www.i-media.ru (http://www.i-media.ru)
petra_spb
На сайте с 03.10.2007
Offline
17
#1

Все верно... Слэш ставится в начале и в конце имени директорий при запрещении индексации в robots.txt, хотя может и без него будет работать, но я бы так не эксперементировал...

Есть досуговый или адалт траф? Лучший конверт здесь (http://clickcashmoney.com/index.htm?wm=439154).
maroccanez
На сайте с 14.07.2007
Offline
36
#2

Если речь идет о папке bitrix - то нужен. Если убрать слеш, содержимое папки будет индексироваться

ICQ prank цЫтатник(+18) (http://icqprank.ru/) / Ландыши - ВОТ ТАК! (http://landyshi.com)
-=K@tya=-
На сайте с 01.06.2007
Offline
26
#3

отлично! тогда не буду убирать..все оставлю как есть ;)

AN
На сайте с 05.06.2004
Offline
243
#4
-=K@tya=-:

Disallow: /bitrix/

но у меня есть сомнения..нужен ли последний слэш /bitrix/ ?

и есть ли какая нибудь разница если, допустим, я его уберу. это на что нибудь влияет вообще?

Disallow: запрещает индексировать все урлы, начинающиеся на указанные символы. В вашем случае - все, начинающиеся на "/bitrix/" - именно так, со слешем. Если у вас есть страницы с урлами типа /bitrix12345qwerty, то при

Disallow: /bitrix/

они будут индексироваться, а при

Disallow: /bitrix

их индексация будет запрещена.

Размещу ваши баннеры на посещаемых сайтах. Места еще есть! Возможен безнал. (/ru/forum/324945) Нужны копирайтеры/рерайтеры - медики. Пишите в личку. (/ru/forum/676932)
AN
На сайте с 05.06.2004
Offline
243
#5
maroccanez:
Если убрать слеш, содержимое папки будет индексироваться

С чего вдруг? :)

SergeyK
На сайте с 18.07.2007
Offline
41
#6

AnNik, +1

-=K@tya=-, вот Вам небольшая, но полезная статья с примерами.

С уважением, Сергей Коваленко.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий