Дорвеи парсят сайт - что делать?

1 234
[Удален]
#31

Да просто попросите чтобы не парсили и линк:)

Пошел доры валить, если Вас начнут СДЛы из выдачи вытеснять -пишите, договоримся

охохохохо

M
На сайте с 02.04.2013
Offline
11
#32
one_way:

охохохохо

Это они так завидуют )

[Удален]
#33

То что Вы называете СДЛ = это скорее всего стандартный ГС, СДЛ урл не скрывают.

А доры, они то доры, сделают еще, не умрут дорвейщики, а "СДЛ" у Вас один, мало-ли что с ним может случится, а такие "СДЛ", дорвейщику на которого стуканули - уволочь в бан, плевое дело :)

D
На сайте с 24.01.2013
Offline
89
#34
one_way:
То что Вы называете СДЛ = это скорее всего стандартный ГС, СДЛ урл не скрывают.
А доры, они то доры, сделают еще, не умрут дорвейщики, а "СДЛ" у Вас один, мало-ли что с ним может случится, а такие "СДЛ", дорвейщику на которого стуканули - уволочь в бан, плевое дело :)

забыл добавить - ничего личного , только бизнес.... ©

PomAnt
На сайте с 26.10.2013
Offline
15
#35
Osan:
Как быть, если СДЛ парсят дорвеи. За последнюю неделю нашел 29 доров новых в гугле которые используют контент моего сайта.

В robots.txt пропиши строку.

Disallow: /

Должно сработать. :)

Сначала тебя игнорируют, затем над тобой смеются, затем с тобой борются, затем ты побеждаешь © Махатма Ганди
groupwm
На сайте с 30.10.2011
Offline
148
#36
PomAnt:
В robots.txt пропиши строку.

Disallow: /


Должно сработать. :)

это чисто для дорвеев всех видов, чтобы не парсили:


User-agent: *
Disallow: /
1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий