Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Что запрещать в robots.txt для движка DLE?

h-i-t-m-a-n
На сайте с 14.11.2007
Offline
125
h-i-t-m-a-n
549

собсно сабж

Kirik
На сайте с 13.04.2006
Offline
266
Kirik
#1

То, чно не хочешь показывать ПС

~~ Продвижение сайтов (https://kirik.pro/) ~~ PRPosting.com (https://prposting.com) - ссылки под бурж, 100+ стран, 45000 доноров, партнерка с 5% от трат ~~ Копирайтинг и рерайтинг (https://wordfactory.ua/)
Progr@mmer\.
На сайте с 14.10.2007
Offline
44
Progr@mmer\.
#2
User-agent: *
Disallow: /*/print:page
Disallow: /user/
Disallow: /category/

Этим самым ты уберёшь дубли с сайта.

Вашей девушке не хватает романтики? Черпните её на сайте «Я Люблю Романтику» (http://iloveromantics.ru/). Романтический форум (http://forum.iloveromantics.ru/) для отдыха от нудной работы.
Korew
На сайте с 31.12.2007
Offline
195
Korew
#3

У меня есть один сайтик на ДЛЕ, так я там вообще ничего не запрещал и Яша его полностью скушал, включая категории с субкатегориями и что самое удивительное страницы вывода на печать!

cleverbird
На сайте с 17.03.2008
Offline
41
cleverbird
#4

Progr@mmer.,

Этим самым ты уберёшь дубли с сайта.

Что за дубли?

осторожно, работает мозг
VK
На сайте с 07.02.2008
Offline
4
ValeriiKo
#5
cleverbird:
Что за дубли?
Korew:
страницы вывода на печать!

+10 дублей

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий