Защита сайта от воровства контента и излишней активности

12
СЛ
На сайте с 22.02.2009
Offline
11
#11
Алексей Барыкин:

Crawl-delay в robots.txt

http://help.yandex.ru/webmaster/?id=996567#1022359 :)

Правильно ли я понял, что надо добавить в robots.txt примерно такой текст:

User-agent: *

Crawl-delay: 15

???

Алексей Барыкин
На сайте с 04.02.2008
Offline
272
#12
Светский Лев:
http://help.yandex.ru/webmaster/?id=996567#1022359 :)

Правильно ли я понял, что надо добавить в robots.txt примерно такой текст:

User-agent: *
Crawl-delay: 15

???

В найденом Вами же хелпе сказано что правильно.

angr
На сайте с 11.05.2006
Offline
413
#13

Народ! У вас что, у всех, на сайтах супер уникальный текст? Может он претендует на Пулитцеровскую премию?

Ну тогда я искренни рад за вас и хочу огорчить - текст по любому выдернут!

Ну а если он, не такой уж и уникальный - то стоит ли заморачиваться?

P.S. все вышеприведенные примеры, при желании, очень легко обходятся... учите мат. часть.

Требуется СЕО-Специалист в Кишиневе, в офис. ()
D
На сайте с 25.12.2006
Offline
37
#14

Надо будет, все скомуниздят. Хотите полностью оградится от воров и граберов, запарольте сайт и выдавайте ключ только после личного знакомства :)

Контакты: icq 23378050 семь Услуги технолога, недешево ()
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий