А если есть ссылки на уже несуществующие страницы / ошибочные урлы...
Опаснее другое: бот находит новый урл... а там контент, который у него уже в индексе. А ему не сказали, что это переезд.
Для морды - это закрывание с тройным слешем, а не с двойным.
Disallow: *// # запрет двойного (и тройного тоже) в любом месте любых урлов.
Сначала такие логи покажите... а потом дуйте на воду.
Не получалось у меня скормить ботам (и яндекс в этом был опять похож на гугл) урлы, отличавшиеся количеством слешей в конце... они говорили, что такой урл уже есть в индексе.
А были времена, когда паства ещё надеялась, что яндекс догонит гугл... но смысл в этом исчез давно - в этой стране.
И особенно хорошо знали, что вкладываться в его развитие нет смысла (тут вам не гугл и не свободный рынок - где публичным компаниям фактически больше денег), поэтому еда, такси и... якобы избавление от российских активов. Теперь спамерюгам станет легче всё добить.
Главное - оформиться по ТК, обсуждать всё в офисе под камерой и по телефону с симкой, зарегеной на себя / по почте, зарегеной на яндексе... и деньги получать по столь же контролируемым каналам. Т.е. всю доказательную базу надо старательно собирать самому.
ps Недавно в скандальной ситуации со 100% легальным бизнесом столкнулся с их стойким нежеланием вызывать полицию... они предпочли ЧОП, сотрудник которого, после официальной части, дружески посоветовал нарушителю разбираться не под камеру и без свидетелей... вот так "условно" он любит своих клиентов.
А ответственность регистратора/хостера/провайдера - без которых не было бы доступа к...
Сможете найти юрисдикцию, где с проституцией / наркобизнесом борется кто-то (кроме как на бумаге / кроме конкурентов)? С т.н. 'голыми вечеринками' - это борьба или реклама у них такая? Однажды видел некую суету полиции по отлову наркоманов, но гораздо чаще слышу громкие телефонные разговоры про закладчиков.
Биомассы, что скажет инквизиция вашей конфессии о перспективах душек обращавшихся к гадалкам и прочей нечисти? Может вылечат ещё до того, как сдохнете?
Недавно прочитал витьеватую формулировку экспертного заключения на мед.тему. Почти как у Нострадамуса. И ведь те спецы между собой примерно так и разговаривают. Теорию относительности почитайте...
А мысли вас и не интересовали, только предсказания.