Чего ты там знаешь? :D
Проходи мимо, с тобой у меня нет теперь ваще желания разговаривать.
Да один тот факт, что ты это заявляешь — показывает всю твою бессовестность. Готов на любую подлость и поддержку недопаствы, чтобы получить вырвать желаемое.
Чего вдруг? Странный подход, я и песах могу отметить, если чо, хоть и не boga@voxnet.ru
Людей убивать нельзя, они цари природы.
Это коснётся всех следующих категорий, как и Disallow: /services/
Ничего не понятно. От ваших действий зависит всё!
Если страница доступна по 2 и более адресам — плохо. Совершенно неважно, что на этот счёт думали разработчики. Надо устранять.
Посмотрите сайт по составлению robots.txt, если будет что-то непонятно, тогда подскажем. :)
http://robotstxt.org.ru/
gagarin123, таких ботов полно, может и гуглятина клоакинг ищет притворяясь тупыми ботами.
Если создаёт нагрузку - банить, а так - пусть живёт ползун :)
Забавно, на startup ищут деньги для РАЗРАБОТКИ, а монетизация должна составлять основу (в типичном понимании it-проекта). А вы думаете, что это такой продукт который покупают инвесторы-идиоты? :D
Вам же выше сказали правильно: