Найдите все используемые подсети Битерики и блокируйте весь список.
p.s. И - да, Битерика не единственная спам сеть, где активно арендуются серверные прокси, поэтому конечно частичный блок адресов Битерики не исчерпывающе решают вопрос.
У Раш Академи в этом направлении хорошие наработки, у них в курсе есть отдельно блок для работы c AI инструментами.
Там хорошая концентрация фичей. Ссылки традиционно не даю, где и как взять - понятно.
Есть ещё ряд курсов, на мой взгляд, вполне достойные внимания, включая Чекушина, но это уже узкая специфика, там скорее больше полезной аналитики и практических наблюдений.
Да, видел, спасибо, тоже понравился.
Спасибо за ориентир, посмотрел - роскошно 👍
Поддержу. И добавлю. То, что называется фишками, а с подачи Дениса Расковалова на Яндексе стало называться фичами работает довольно в узком кругу специалистов, когда читающая аудитория точно использует данный инструмент(ы), имеет доступ к соответствующим ресурсам и точно понимает, что предлагается в конкретных обстоятельствах.
Более того, данные специалисты друг друга более менее знают, понимают, что предлагается (!) и есть резон делиться, потому что происходит взаимный обмен практическими знаниями. Люди конкретные, адекватные, благодарные, доброжелательные.
А когда на широкую публику, которая ни инструментарием не владеет, ни пониманием для чего это пользуется, да ещё в ответ чаще всего ехидные возгласы - пустой номер.
Бессмысленно и ненужно. А вот общие рабочие рекомендации - да, вполне. Но и их ленятся выполнять (вот ведь какая штука), поэтому какие там сложные фичи и фишки, требующие подготовки и доп. программного оснащения. Проблема в том, что даже очевидно полезного не делают, ожидая какой-то персональной именной волшебной палочки. Зачастую понять написанное и то проблема, а куда уж применять.
В моём ведении в настоящий момент 5 сайтов (в стадии активной работы), бывает даже меньше бывает и больше, но как правило больше 7-ми не бывает. На всех работает проф. команда и программисты, которым я ставлю задачи, следовательно, XML карта генерируется автоматически.
В данном случае (описанном TC) скорее всего речь идёт о ручной генерации (потому что в стартовом посте была речь про сервисы по генерации карты), следовательно, сервис я предлагаю заменить десктопной программой. Что не так?
.... существуют программисты... и выполнение заданий через cron ...
Верно. И я как раз начал с того, что, цитирую: ".. программируется логика генерации XML карт(ы), чтобы разного рода служебные страницы.. " и далее по тексту.
Делается это в рабочей связке с программистами. Но очевидно же 😉
Зачем же из поста выхватывать лишь последний абзац и комментировать его в отрыве от всего контекста 😉
Есть варианты, когда CMS генерирует автоматически, когда карта небольшая.
Да и когда большая, управление генерацией карты может быть через CMS в отложенном режиме.
Здесь специалист специалисту рознь и даже если на первоначальном этапе это избыточно, то позднее я бы поставил в рабочий план протестировать это решение.
Если оно даст более успешные поведенческие и это отразится на ранжировании и на конверсиях, то постфактум первоначальные выводы ваших специалистов могут оказаться неверными.
Чтобы не заниматься этим вручную, есть CMS.
Хотя даже если и вручную, настроил проект в Frog-e, сохранил, свернул, потом одной кнопкой - переобход, другой генерация новой карты. Не сложно совсем.
Да, какие там страдания, будет вам.
Генераторы фиксируют все страницы, до которых фактически могут дотянуться и не действуют явные запреты.
Как выше правильно сказал Vladimir SEO (я немного расширю) правила обходами поисковыми роботами и индексации изначально задают при проектировании (что является частью технического оптимизации).
Дальше программируется логика генерации XML карт(ы), чтобы разного рода служебные страницы (ненужные для обхода ПС) не помещалишь в XML карту. На выходе - CMS-а генерирует уже более корректную карту.
В случае различных онлайн генераторов такой возможности нет, генератор поместит в XML карту всё, что найдет.
Как вариант вы можете использовать Screaming Frog, выполнить необходимые настройки, просканировать свой сайт и сгенерировать более корректную XML карту. Когда нет возможности решить этот вопрос через CMS-ку, я бы пошёл именно по этому пути.
Я бы сказал, есть эффективные методики, а есть неэффективные решения. Не только в ссылочном, и не только в ПФ.
Называть это фишками или не называть, это просто фигура речи.