Форум Сайтостроение Веб-строительство

Запрет для гугла и яндекса через htaccess - всё ли верно?

D1
На сайте с 26.02.2013
Offline
61
dpakyj1a
1314

Привет. Подскажите, как правильно?:

RewriteCond %{HTTP_USER_AGENT} ^yandex.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^googlebot.* [NC,OR]

RewriteRule .*\.(swf)$ - [F]

или

RewriteCond %{HTTP_USER_AGENT} ^.*yandex*$ [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*google*$ [NC,OR]

RewriteRule ^(.*).swf$ - [F]

Либо оба варианта неверны? Не слишком сильно разбираюсь в том, где и какие символы здесь лишние или каких не хватает.

---------- Добавлено 14.02.2016 в 19:04 ----------

Суть в том, что хочу запретить гуглу и яндексу .swf файлы, тк они их индексируют и заносят в поиск. Быть может хватит обычного хотлинка для .swf файлов - будет ли этот способ эффективен против всех сайтов, либо же нужно использовать приведённый мною выше метод (в htaccess)?

Мой сайт - klinok.pl.ua.
CD
На сайте с 30.03.2009
Offline
94
CyberDrony
#1

Вот так:

RewriteCond %{HTTP_USER_AGENT} ^.*yandex.*$ [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*google.*$ [NC,OR]

A
На сайте с 04.11.2007
Offline
134
asteroid
#2
dpakyj1a:
Суть в том, что хочу запретить гуглу и яндексу .swf файлы

robots.txt

User-agent: *

Disallow: /*.swf$

[Удален]
#3
asteroid:
robots.txt

User-agent: *
Disallow: /*.swf$

Если не ошибаюсь, лучше так: 


robots.txt



User-agent:*

Disallow:*.swf

Так как с / и без / с технической точки зрения разные значения.

По поводу htaccess - зачем гемороем страдать, если всё намного проще?

A
На сайте с 04.11.2007
Offline
134
asteroid
#4

DAWR, нет не лучше.

Правильно выше с пробелами, слешем и долларом.

L
На сайте с 10.02.2015
Offline
249
livetv
#5

RewriteCond %{HTTP_USER_AGENT} (AhrefsBot|SolomonoBot|SearchBot|MJ12bot|SMTBot|SearchmetricsBot|spbot|MegaIndex|XoviBot|HostTracker|Wget|BegunAdvertising|Python|LibVLC) [NC]

RewriteRule .* - [F,L]

---------- Добавлено 16.02.2016 в 17:30 ----------

А, только свф-файлы - тогда через роботс

BG
На сайте с 03.10.2010
Offline
195
BrightGuy
#6
livetv:

А, только свф-файлы - тогда через роботс

Можно и через .htaccess, логично будет заливать все файлы .swf в одну или несколько папок, где будут только эти файлы и закрыть доступ к ним. Думаю что у ТС именно так

-= Сайты на заказ | Правки, обновление, работы по DLE =- ( /ru/forum/791118 ) Telegram: @ruslansh ( tg://resolve?domain=ruslansh )
D1
На сайте с 26.02.2013
Offline
61
dpakyj1a
#7

Роботс для яндекса - да, но для гугла это почти пустое место. Сделал хотлинк для .swf файлов, но без понятия - удалятся ли они из индекса ПСов, ведь по сути, чтобы что-то проиндексировать и выводить в результатах поиска, робот должен сделать страницу с копией, а с хотлинком это вряд ли возможно. Хотя тут много не состыковок, так что я не без понятия...

Платон Щукин об успешной Почему страницы сайта выпадают В новом Search Console

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий