Форум Практика оптимизации Любые вопросы от новичков по оптимизации

запретить доступ для YandexBot/3.0; MirrorDetector;

Rimlyanin
На сайте с 22.02.2006
Offline
200
Rimlyanin
1659

Вот любопытно, можно ли запретить доступ к сайту для "Mozilla/5.0 (compatible; YandexBot/3.0; MirrorDetector; +http://yandex.com/bots)" и чем это грозит?

Mr.Smile
На сайте с 10.01.2011
Offline
65
Mr.Smile
#1

Можно запретить его IP в .htaccess.

MirrorDetector - этот бот зеркала определяет.

Rimlyanin:
и чем это грозит?

На этот вопрос внятный ответ вряд ли услышите.

<--TTT-->
Rimlyanin
На сайте с 22.02.2006
Offline
200
Rimlyanin
#2
Mr.Smile:
Можно запретить его IP в .htaccess.

Угу, именно так и собираюсь сделать.

Mr.Smile:
MirrorDetector - этот бот зеркала определяет.

Угу, именно он.

Mr.Smile:
На этот вопрос внятный ответ вряд ли услышите.

Просто я хочу призеркалить ещё один домен на сайт, но пока не хочу что бы яшка считал его зеркалом. Но индексировал...

Mr.Smile
На сайте с 10.01.2011
Offline
65
Mr.Smile
#3

У одинаковых роботов бывают разные IP. Не забывайте об этом.

Возможно робота стоит не блокировать, а выдавать ошибку 404....

Rimlyanin
На сайте с 22.02.2006
Offline
200
Rimlyanin
#4
Mr.Smile:
У одинаковых роботов бывают разные IP. Не забывайте об этом.

Возможно робота стоит не блокировать, а выдавать ошибку 404....

то, что разные IP это понятно... не в этом суть...

404 или таймаут - не принципиально

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий