Google индексерует то, что запрещено в robots.txt

12
alexspb
На сайте с 14.11.2005
Offline
187
#11
Spectre:
Ну как вариант: просто не выдавать контент для User-Agent'ов. Клоакинг простой, но надежный.

А не будет за это надежный бан? Имеет право робот (поисковик) обидеться?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий