яндекса/гугла пропускать, остальных проверять активной проверкой на "человечность", самое простое и самое эффективное.
Со всяких, есть как серверные мусорные типа битерики, так и ростелеком, мегафон и прочие домашние.
В последнее время все блокировки происходят автоматически. Как я понимаю, специально обученные боты парсят выдачу по нужному запросу - собирают список доменов. Далее по списку домены парсятся на предмет запрещенки. То есть на сайты никто не переходит и вручную не просматривает содержимое. Таким образом, если домен глухо закрыт и отдает 403 код, то спарсить его нельзя. И заблокировать соответственно тоже.
да клоакинг снижает количество абуз и блокировок.
Проблема может быть в низком спросе на подобный контент. Я сделал цикл статей по одному фреймворку. Статьи уникальны, конкуренция низкая, спрос вроде бы есть. ЖПТ ответы на таком уровне сложности правильные давать не может. Сайт старый, сразу все попадает в выдачу. Вроде бы все звезды сошлись. Но 30-40 человек в день! Это смешно.
Чем сложнее тема, тем ниже спрос. С другой стороны в простых темах вас заменят крупные сайты и ЖПТ.
сейчас и программистам быстрее пару раз спросить чатгпт, чем ходить по сайтам с кучей рекламы и искать ответ.
Да не нужны мне эти попугай, это Гоше нужны. Он в Core Web Vitals отправил все страницы в красную зону. Вот и чешу репу, что с этим делать.
там могут быть причины другие, а не формат картинок. с картинками проверить просто пересохранив "для веб" в любом редакторе. если у вас они были 2-5 мб, а стало 200-500 кб без сильной потери качества, тогда надо пересохранять картинки.
не можно, а нужно. я сейчас вот тоже провожу этот эксперимент. на живом сайте с человевеческим контентом трафа крохи, с ИИшным на порядок уже выше.
Апну тему.
На дворе 2025, вроде все уже поддерживают формат webp. Так стоит заморачиваться или нет? А то PageSpeed задолбал уже совсем. Кто что скажет?
вам для людей или ради бесполезных попугаев пейджспида? если картинка (jpeg, png) и так весит адекватно, то не заморчивайтесь.
У них защита от ддоса. Очень посредственная, не сравнится с бесплатным клаудфларом, от поведенческих (браузерных) ботов у них защиты нету.
у таких крупных сервисов бабки в основном на криптобиржай, потому вполне чистый кошель будет в отправителе.
