Легко? Для сотен учреждений с подтверждением по телефону? И никого не колышет что поддомен один и тот же?
Так прикол в том что прошла неделя, он хавает страницы с уже добавленным мета и добавляет их в индекс.
Я вот захожу в отчет и вижу как он перелопатил кучу страниц 12 апреля, когда мета была на страницах дней 6 как.... реально баг или глюк или фича....
Подожду еще недельку, а потом запрещу ему доступ, раз не придерживается своих же правил.
rabotnik-makdonalds
Может правильнее сделать локейшн в Nginx и отдавать роботу Гугла 410 ответ?
Я так понял они пишут типа если не хотите чтобы страница индексировалась - неправильно делать правила в роботсе, нужно добавить
Так вот у меня сейчас и правила в роботсе + <meta name="robots" content="noindex"> а странице все равно в индексе!!! И таких страниц более 7000!!!
WTF ???
voog.com можно сразу в бан, помойка типа Тильды
music-trap.com
jonny1960, у них все нормально - рост +30% каждый квартал
Я всего несколько раз пользовался массовой блокировкой при использовании скрипта Оптимизайки /ru/forum/958253
ipset показал себя отлично
videoguymedia.com
