Запрет индексации через .htaccess

12
R
На сайте с 11.02.2009
Offline
149
#11

vxc, а эта строка для чего интересно RewriteCond %{HTTP_USER_AGENT} ^.*crawler*$ [NC] ?

[Удален]
#12
refroz:
vxc, а эта строка для чего интересно RewriteCond %{HTTP_USER_AGENT} ^.*crawler*$ [NC] ?

crawler - сетевой паук. У некоторых ПС это слово в user agent присутствует.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий