Как правильней закрыть дублированный контент?

R34-zevs
На сайте с 15.07.2006
Offline
238
322

Подскажите пожалуйста, как сделать правильно, чтоБЫ избежать дублированного контента.

http://www.сайт.ру и http://www.сайт.ру/index.html (нужно чтобы перестала числиться и выдаваться) - как правильно поступить. Запретить индексацию http://www.сайт.ру/index.html для гугл и Яндекс, а с неё поставить редирект 301 ?

Если с www. и без www. понятно, что через редирект можно, а как быть с /

Агентство недвижимости Фабрика Жилья (http://xn--80aacvicll3bzbzgqb.xn--p1ai/)
WebAlt
На сайте с 02.12.2007
Offline
266
#1


Options +FollowSymLinks
RewriteEngine On
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.html\ HTTP/
RewriteRule ^index\.html$ http://example.ru/ [R=301,L]
Yapy
На сайте с 30.01.2012
Offline
2
#2

Можно использовать директивы роботс.тхт.

Хотя, если страница с индекс.хтмл уже попала в индекс, и особенно, если на неё есть внешние ссылки, то вылета из индекса её сложно будет добиться.

R34-zevs
На сайте с 15.07.2006
Offline
238
#3
WebAlt:

Options +FollowSymLinks
RewriteEngine On
RewriteCond %{THE_REQUEST} ^[A-Z]{3,9}\ /index\.html\ HTTP/
RewriteRule ^index\.html$ http://example.ru/ [R=301,L]

http://www.сайт.ру/index.html - а нужно ли для неё noindex nofollow в мета прописывать?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий