garry69

Так в мане РСЯ по этой блокировке куча пунктов:

В  .htaccess добавьте:

SetEnvIfNoCase User-Agent "^Yandex" search_bot
<Limit GET POST HEAD>
Order Allow,Deny
Allow from all
Deny from env=search_bot
</Limit>

Можно менять добавлять и тд.

Если бы сейчас встал вопрос о построить статейник, я бы сделал  Headless с  WordPress или статичный сайт а генератор страниц взял был WordPress. Под все есть готовые решения. Сразу кучу вопросов снимает.

Понравился этот ИИ в плане рефакторинга кода и не самые простые варианты обрабатывает. Как и размер кода "любой", я не давал по 1000 строк, но 500+ точно ест.

Тексты живенько так, промты слушает, но пока не готов дать оценку.

Это какой-то AI бот по таким ссылкам ходит иногда, сходу не помню какой, но закрой от AI, если они не нужны. Этот из понимающих роботс.

Да, уже проверил. Кстати проверил до этого с трех провайдеров и не работало, только с впн, видимо что-то на сервисе было.

Вопрос решился сам собой, сейчас проверил и заходит норм.

Пока нет корреляции у меня по капче на прямые и рся. Сайтов много так работает. Но некоторое время назад запустил фильтрацию всего трафика невидимой яндекс капчей. Результат очень даже удовлетворительный по ботам, плюс некоторые другие фильтры и конкретные баны cidr и asn. Но пока мало время прошло для окончательных выводов.

Самый просто вариант, отлавливаешь  user agent, а робот яндекса представляется. Дальше лимит на доступ в минуту или что актуально и бан (любой вариант ответа) на минут 10 или больше. Скриптов такого рода навалом в сети, не конкретно под яндес но на бан на время. Подключать скрипт в .htaccess через auto_prepend_file.

По мне полезная штука, сделать не сложно, но точно знаешь, хуже не будет и один из пунктов закрыт. Тем более проще получать полноценную карточку где то вне сайта.