И снова robots.txt. Подскажите.

seoboy
На сайте с 23.09.2006
Offline
130
467

На сайте есть форум,досупный по адресу site.ru/forum/index.php

Как будет правильно закрыть индексацию всякого мусора(поиск,профили и т.д)

1й вариант

User-agent: *

Disallow: /usercp.php

Disallow: /misc.php

Disallow: /online.php

Disallow: /report.php

Disallow: /postings.php

Disallow: /search.php

2й вариант

User-agent: *

Disallow: /forum/usercp.php

Disallow: /forum/misc.php

Disallow: /forum/online.php

Disallow: /forum/report.php

Disallow: /forum/postings.php

Disallow: /forum/search.php

P.S. Фак читал,такой вопрос там не рассматривается.

Кованые и деревянные люстры под старину - Длань.рф (http://длань.рф)
K0
На сайте с 11.10.2006
Offline
57
#1

укажите просто полный путь от корневой директории до файла который хотите запретить

в вашем случае второй вариант

6666
На сайте с 10.01.2005
Offline
505
#2

Второй вариант.

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
Ctulhu
На сайте с 21.05.2005
Offline
222
#3

Кстати, если у вас vb, то на самом деле лучше всего закрыть (смотря от версий, могут быть еще другие директории, или некторых моежт не быть)

Disallow: /forum/archive/
Disallow: /forum/calendar.php
Disallow: /forum/faq.php
Disallow: /forum/member.php
Disallow: /forum/memberlist.php
Disallow: /forum/misc.php
Disallow: /forum/newthread.php
Disallow: /forum/online.php
Disallow: /forum/printthread.php
Disallow: /forum/private.php
Disallow: /forum/profile.php
Disallow: /forum/register.php
Disallow: /forum/search.php
Disallow: /forum/sendmessage.php
Disallow: /forum/showpost.php
Disallow: /forum/subscription.php
#для параноиков
Disallow: /forum/editpost.php
Disallow: /forum/newreply.php
Disallow: /forum/postings.php
Disallow: /forum/report.php
Disallow: /forum/usercp.php

для параноиков, так как урлы доступны только зареистрированным или модераторам-администраторам

Rimlyanin
На сайте с 22.02.2006
Offline
200
#4

а для phpbb пароноидальный robots.txt есть??

С
На сайте с 31.08.2006
Offline
69
#5

А вот тут можете сразу проверить свой роботс, правильно ли он написан или нет.

А вообще я бы закрыл полностью директорию forum, чем по отдельности каждый файл

http://www.yandex.ru/cgi-bin/test-robots

Счастье – это не цель, а побочный продукт…
Rimlyanin
На сайте с 22.02.2006
Offline
200
#6
Сибиряк:
А вот тут можете сразу проверить свой роботс, правильно ли он написан или нет.
А вообще я бы закрыл полностью директорию forum, чем по отдельности каждый файл

http://www.yandex.ru/cgi-bin/test-robots

Если закрыть все директорию то форум ведь индексироватся не будет???

А надо что-бы контент индексировался...

С
На сайте с 31.08.2006
Offline
69
#7
Rimlyanin:
Если закрыть все директорию то форум ведь индексироватся не будет???

да не будет

Rimlyanin:
А надо что-бы контент индексировался...

тогда закрой те файлы, которые не хочешь чтоб индексировались, либо если это возможно перемести их в отдельную папку и закрой эту папку от индексации, тогда роботс.тхт будет намного меньше и проще.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий