Что следует скрывать на своем сайте от индексации?

[Удален]
987

В частности стоит ли указать в robot.txt не индексировать комментарии к статьям? Ну и в целом, кто что посоветует! Буду рад любому совету

Talisman13
На сайте с 20.01.2007
Offline
211
#1
stolZZZ:
не индексировать комментарии к статьям?

Зачем же закрывать контент по которому могут находить сайт? Не нужно этого делать.

Нужно закрывать дубли страниц, какую либо рабочую информацию, если она не нужна в ПС.

A8
На сайте с 20.08.2009
Offline
69
#2

нужно закрывать дубли контента.Облако тегов,последние новости...

в Dle,например,служебные страницы (добавление новости,страница регистрации,правила на сайте и т.п.) и профили пользователей.

комменты не надо закрывать

Жизнь Хороша!
Webit
На сайте с 13.12.2006
Offline
240
#3

ЕСли в комментах спам, то тоже закрывайте

muratti
На сайте с 31.05.2008
Offline
238
#4
Webit:
ЕСли в комментах спам, то тоже закрывайте

Проще избавить комменты от спама, той же капчей или словом. :)

F
На сайте с 16.01.2010
Offline
267
#5
muratti:
Проще избавить комменты от спама, той же капчей или словом. :)

Ещё проще убрать гиперссылки, юзерам все равно, а спамерам уже там делать нечего.

muratti
На сайте с 31.05.2008
Offline
238
#6
futuristian:
Ещё проще убрать гиперссылки, юзерам все равно, а спамерам уже там делать нечего.

Как спамеры узнают, что в комментах нельзя постить ссылки? Проге все равно... :) Так что, капча или слово рулят, во славу Онотоле.

F
На сайте с 16.01.2010
Offline
267
#7
muratti:
Как спамеры узнают, что в комментах нельзя постить ссылки? Проге все равно... :) Так что, капча или слово рулят, во славу Онотоле.

Ну тогда капчу и убрать гиперссылки :) Капчи могут и врукопашную обходить самые настырные.

muratti
На сайте с 31.05.2008
Offline
238
#8
futuristian:
Ну тогда капчу и убрать гиперссылки Капчи могут и врукопашную обходить самые настырные.

Премодерация спасет отца русской демократии. :D Если народу на сайте, конечно, не 100500 тыщ. :D

edka
На сайте с 17.01.2010
Offline
208
#9

Может кому пригодиться методика удаления спама в профилях юзеров для ДЛЕ:

http://wolf-bespredel.ru/web-technologies/udalyaem-spam-v-profilyah-datalife-engine-dle.html

Я так очистил от 1500 говноссылок-ссылок сайт.

Еще думал почему яндекс постоянно торчит в профилях юзеров, оказалось там заспамлено все по самое нехочу.. :(

PS: закрывать профили от индексации не стал, т.к. там было раскуплено уже много ссылок в сапе

north-west
На сайте с 28.06.2010
Offline
31
#10

"С ее помощью необходимо закрывать от индексирования технические и не представляющие ценности ни для пользователя, ни для поисковых систем страницы. К ним относятся страницы с результатами поиска по сайту, статистика посещаемости сайта, дубликаты страниц, разнообразные логи, сервисные страницы баз данных и т.д."

...пора вставать - сам день хреновым не станет...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий