Paradine#: Поддержка пообещала ограничить активность бота (200/минута), но ничего не меняется.
В данном случае речь идёт именно о боте Директа. Никакими Вебмастерами и тем более заголовками сервера он не регулируются.
Решить в пользовательском режиме эту проблему не получится, только Яндекс может увидев (и в должной степени осознав), повлиять на ситуацию.
Ведите плотную переписку с тех. поддержкой, проверяйте фактически насколько они смогли ограничить деятельность своего бота, фиксируйте и высылайте им результат.
Помните, человеческий фактор есть везде (в том числе и в цепочке взаимодействия с тех. поддержкой Яндекса).
Уже говорил и повторюсь - на форуме есть два сотрудника Яндекса, которые реагируют на пользовательские задачи и включаются в их решение.
Напишите Роману (это один из них), он активно включается в проблемы вебмастеров и может помочь с коммуникацией.
Paradine : Последние 2 недели от ботов Яндекса приходит такое количество запросов, что сервер падает.
Приведите более развёрнуто логи.
Paradine : Причём замечена закономерность, что боты начинают активность именно тогда, когда запущена реклама в Яндекс.директе.
IP-шники этих заходов проверяли? Реальные яндексовские?
Paradine : Прикладываю скриншот с логами: 100 000 запросов, это примерно за 3 часа! Из них 74 000 YandexMetrika, 18 000 YandexBot.
Нужны более развёрнутые данные.
Paradine : Написал в поддержку Яндекс.Вебмастера, но они уже неделю отвечают отписками в стиле "специалисты уже занимаются вашей проблемой". Я так понимаю, это может длиться сколько угодно. Что делать - ума не приложу. Без рекламы никак, а как только она запускается - сайт перестаёт работать.
Это очень странно. Скорее всего вас досят, подставляя записи Яндекса.
Однако оригинальные яндековские IP сторонние исполнители подставлять не смогут, поэтому копайте в этом направлении, скорее всего обнаружите сторонние сети, которую нужно будет блокировать.
Ну и с тех. поддержкой Яндекса нужно понастойчивее. На форуме есть представители Яндекса, можно (в любом случае не помешает) обратиться к ним за помощью.
krock : Вот заинтересовала тема поиска CMS для веб-портала, на который потенциально может начать кто-то ходить. ))
Сама по себе программная обвязка целевую задачу не решает. Развивать портал нужно только при поддержке программиста. И здесь без вариантов, иначе дальше вы не сможете решать по настоящему сложные задачи.
Как правило в качестве базы выбирается фреймворк Laravel, Symphony (тут программист сам решает) и дальше путём последовательных ТЗ формируется нужный вам функционал.
Любой более-менее серьёзный проект довольно быстро вырастает из коротких штанишек CMS WP или Joomla, или костылями зарастает настолько, что вы потом замучаетесь отлавливать баги при каждом обновлении.
krock : Из "продвинутых" функций планируется, пожалуй, полнотекстовый поиск, а так - ничего другого пока на ум не приходит...
Простите, но вы пока не готовы к большим проектам, если у вас нет чёткого план-проекта.
Почему если фрейм то только Laravel или Symphony?
Не только. В вышеуказанном тексте не было слово "только", а указанные фреймворки приведены как наиболее популярные.
Не обязательно они, может быть и Codeigniter, и разработка на JS и всё то, что вы указали.
Выбирать всё равно тому, кто будет фактически выполнять программную реализацию.
От TC вообще по большому счёту требуется только проектная часть на уровне описания общей логики и блок схем/прототипов.
Вот сайт https://svadebnie-pricheski.com/ на нем посещаемость упала в 2 раза. Подскажите в чем может быть причина и куда копать?
Копать много куда, но начинать нужно всегда с явных проблем, которые работают в ухудшение лояльности и в отказ.
Нерабочие выводы,
Посторонние текстовые вставки со ссылками (кстати, проверьте на взлом),
Небрежные, растянутые фотографии, выдающие любительский подход
начал тотальную чистку title у тегов img
Можно поинтересоваться, а зачем? Они же никому не мешают..
но блин, ни один браузер не показывает alt при наведении мышки в браузере на элементы img .
И не должен, за это отвечает именно title у тега img, а alt сугубо для поисковых роботов.
чтобы тестировать alt у картинок
как вы быстро проверяете alt тегов img в браузерах?
можете подсказать?
Через различные SEO плагины, SEO букмарклеты, приложение web developer позволяет подсвечивать и выводить информация по img объектам.
Поддержка пообещала ограничить активность бота (200/минута), но ничего не меняется.
В данном случае речь идёт именно о боте Директа. Никакими Вебмастерами и тем более заголовками сервера он не регулируются.
Решить в пользовательском режиме эту проблему не получится, только Яндекс может увидев (и в должной степени осознав), повлиять на ситуацию.
Ведите плотную переписку с тех. поддержкой, проверяйте фактически насколько они смогли ограничить деятельность своего бота, фиксируйте и высылайте им результат.
Помните, человеческий фактор есть везде (в том числе и в цепочке взаимодействия с тех. поддержкой Яндекса).
Уже говорил и повторюсь - на форуме есть два сотрудника Яндекса, которые реагируют на пользовательские задачи и включаются в их решение.
Напишите Роману (это один из них), он активно включается в проблемы вебмастеров и может помочь с коммуникацией.
Также есть ещё Тимур Рябинин.
В вашем случае вам поможет лишь конструктивный диалог и терпение.
Привет. Вопрос в заголовке. Есть ли такие сервисы, которые могут показать ключи по конкретной тематике, а не по введённым словам?
Тема - слишком многозначная область данных. В любой теме есть ниши. Запросы нужно выбирать в контексте рабочих задач.
Вы продаете товары или оказываете услуги, или занимаетесь подбором кадров, или ищете возможности для инвестиций, или ищете работу и т.д. и т.п.
Начинайте всегда с конкретной задачи.
Да нет, вроде все верно, в минутах, но ещё раз гляну
И предложили установить ограничение на количество запросов в минуту (ограничение 200, при 500 нагрузка на проц возрастает до 100%)
Кол-во запросов в минуту? Ничего не путаете?
В настройках скорости обхода значения в секундах.
Последние 2 недели от ботов Яндекса приходит такое количество запросов, что сервер падает.
Приведите более развёрнуто логи.
Причём замечена закономерность, что боты начинают активность именно тогда, когда запущена реклама в Яндекс.директе.
IP-шники этих заходов проверяли? Реальные яндексовские?
Прикладываю скриншот с логами: 100 000 запросов, это примерно за 3 часа! Из них 74 000 YandexMetrika, 18 000 YandexBot.
Нужны более развёрнутые данные.
Написал в поддержку Яндекс.Вебмастера, но они уже неделю отвечают отписками в стиле "специалисты уже занимаются вашей проблемой". Я так понимаю, это может длиться сколько угодно. Что делать - ума не приложу. Без рекламы никак, а как только она запускается - сайт перестаёт работать.
Это очень странно. Скорее всего вас досят, подставляя записи Яндекса.
Однако оригинальные яндековские IP сторонние исполнители подставлять не смогут, поэтому копайте в этом направлении, скорее всего обнаружите сторонние сети, которую нужно будет блокировать.
Ну и с тех. поддержкой Яндекса нужно понастойчивее. На форуме есть представители Яндекса, можно (в любом случае не помешает) обратиться к ним за помощью.
Вот заинтересовала тема поиска CMS для веб-портала, на который потенциально может начать кто-то ходить. ))
Сама по себе программная обвязка целевую задачу не решает. Развивать портал нужно только при поддержке программиста. И здесь без вариантов, иначе дальше вы не сможете решать по настоящему сложные задачи.
Как правило в качестве базы выбирается фреймворк Laravel, Symphony (тут программист сам решает) и дальше путём последовательных ТЗ формируется нужный вам функционал.
Любой более-менее серьёзный проект довольно быстро вырастает из коротких штанишек CMS WP или Joomla, или костылями зарастает настолько, что вы потом замучаетесь отлавливать баги при каждом обновлении.
Из "продвинутых" функций планируется, пожалуй, полнотекстовый поиск, а так - ничего другого пока на ум не приходит...
Простите, но вы пока не готовы к большим проектам, если у вас нет чёткого план-проекта.
Вот сайт с бесплатным, без регистрации, ВПН и без ограничений GPT-3.5 https://chatru.net/
А что там за суммы накапливаются при выполнении запросов?