Как закрыть от индексации определенную часть форума?

L
На сайте с 29.10.2006
Offline
110
813

Здравствуйте!

Не подскажите, как можно закрыть от индексации определенную часть форума/сайта такую, как, скажем, профили пользователя?

На форуме профиль имеет вид http://*****/forum/user****.html

SeBlock (/ru/forum/851994) - программа для ведения проектов по НЧ/СЧ. Буду рад отзывам/комментариям.
Rimlyanin
На сайте с 22.02.2006
Offline
200
#1

а в robots.txt это все закрыть??

ну например вписать в роботс

/forum/user

Recluse
На сайте с 23.03.2006
Offline
93
#2

Действительно, проще всего в robots.txt добавить следующее:

User-Agent: *

Disallow: /forum/user
L
На сайте с 29.10.2006
Offline
110
#3

Спасибо!

Скажите, а как будет корректно:

Так:

----

User-Agent: *

Disallow: /forum/user

Disallow: /forum/ipb.html?showreputation

Disallow: /forum/ipb.html?act=reputation

Disallow: /forum/ipb.html?act=referral

Или так:

----

User-Agent: *

Disallow: /forum/sources/reputation.php

Disallow: /forum/sources/refreal.php

Заранее спасибо за ответ

B
На сайте с 20.11.2006
Offline
47
#4

Смотря что вам необходимо закрыть, robots.txt работает так

все что содержит, то есть начинаеться с

Disallow: /forum/blablabla

поисковик не будет индексировать

То есть если

/forum/sources/reputation.php

и

/forum/ipb.html?act=reputation

одинаковые страницы, то их обоих надо закрывать

L
На сайте с 29.10.2006
Offline
110
#5

/forum/ipb.html?showreputation

/forum/ipb.html?act=reputation

Это обрезки ссылок которые используются. Полная ссылка выглядит так, к примеру:

/forum/ipb.html?showreputation=400

Т.е. я обрезал все, что идет после: /forum/ipb.html?showreputation

А в то же время /forum/sources/reputation.php - файл, который отвечает за эти все действия, но если ввести его в браузер, то выдаст ошибку, что нет доступа. Так стоит ли его закрывать? И правильно лиз кзакрывать по первому вариату?

Как будет правильно?

B
На сайте с 20.11.2006
Offline
47
#6

/forum/sources/reputation.php

закрывать не надо

Первый вариант правильный получается...

L
На сайте с 29.10.2006
Offline
110
#7

Спасибо!

А внешние ссылки закрываются таким же образом или другим?

T
На сайте с 11.08.2005
Offline
181
#8
Luxer:
А внешние ссылки закрываются таким же образом или другим?

Конечно же, другим способом.

Для Яндекса: <noindex><a href=""></a></noindex>

Для Гугла: <a href="" rel="nofollow"></a>

Для того, чтобы закрыть ссылку от ондексации Яндексом и чтобы она не учитывалась Гуглом: <noindex><a href="" rel="nofollow"></a></noindex>

L
На сайте с 29.10.2006
Offline
110
#9

Огромное спасибо за помощь!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий