- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
В 2023 году Google заблокировал более 170 млн фальшивых отзывов на Картах
Это на 45% больше, чем в 2022 году
Оксана Мамчуева
Как удалить плохие SEO-ссылки и очистить ссылочную массу сайта
Применяем отклонение ссылок
Сервис Rookee
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Последние 2 недели от ботов Яндекса приходит такое количество запросов, что сервер падает. В вебмастере скорость обхода сайта настроена на значение 2 запроса в секунду. Причём замечена закономерность, что боты начинают активность именно тогда, когда запущена реклама в Яндекс.директе.
Прикладываю скриншот с логами: 100 000 запросов, это примерно за 3 часа! Из них 74 000 YandexMetrika, 18 000 YandexBot.
Написал в поддержку Яндекс.Вебмастера, но они уже неделю отвечают отписками в стиле "специалисты уже занимаются вашей проблемой". Я так понимаю, это может длиться сколько угодно. Что делать - ума не приложу. Без рекламы никак, а как только она запускается - сайт перестаёт работать.
Я так понимаю, это может длиться сколько угодно
Ждать бесполезно. Ситуация такая, у них не осталось нормальных программистов. Кто, куда разъехались и по каким причинам, думаю понятно.
Даже не смотря курсы Практикум, которые ведут программист-куратор-менеджер-hr_специалист (всё в одном лице), не помогло им найти источники молодых и талантливых кадров.
Как временный выход с ситуации - переезжать на мощные сервера и незамедлительно оптимизировать сайт под большие нагрузки.
Советую, как человек с опытом взаимодействия с этими "специалистами, которые уже занимаются вашей проблемой"
Последние 2 недели от ботов Яндекса приходит такое количество запросов, что сервер падает. В вебмастере скорость обхода сайта настроена на значение 2 запроса в секунду.
А что мешает уменьшить скорость обхода? Яндекс - это вещь в себе. Например, если сайт на поддоменах, нет общей скорости, есть отдельные для каждого поддомена, что не есть гуд. Во-вторых, есть стандартный запрос в техподдержку, там могут проверить и уменьшить.
Последние 2 недели от ботов Яндекса приходит такое количество запросов, что сервер падает.
Приведите более развёрнуто логи.
Причём замечена закономерность, что боты начинают активность именно тогда, когда запущена реклама в Яндекс.директе.
IP-шники этих заходов проверяли? Реальные яндексовские?
Прикладываю скриншот с логами: 100 000 запросов, это примерно за 3 часа! Из них 74 000 YandexMetrika, 18 000 YandexBot.
Нужны более развёрнутые данные.
Написал в поддержку Яндекс.Вебмастера, но они уже неделю отвечают отписками в стиле "специалисты уже занимаются вашей проблемой". Я так понимаю, это может длиться сколько угодно. Что делать - ума не приложу. Без рекламы никак, а как только она запускается - сайт перестаёт работать.
Это очень странно. Скорее всего вас досят, подставляя записи Яндекса.
Однако оригинальные яндековские IP сторонние исполнители подставлять не смогут, поэтому копайте в этом направлении, скорее всего обнаружите сторонние сети, которую нужно будет блокировать.
Ну и с тех. поддержкой Яндекса нужно понастойчивее. На форуме есть представители Яндекса, можно (в любом случае не помешает) обратиться к ним за помощью.
А что у вас по настройкам метрики? Цели? Отбивка конверсий может? Думаю надо копать куда-то туда. Я вообще никогда не видел в логах метрики.
Всё включено, цели, вебвизор, конверсии
Попросите грамотного админа у своего хостера, чтобы он разобрался в проблеме. Здесь как-то трудно гадать на кофейной гуще без доступа к вашему серверу. Возможно, нужно добавить ресурсов на сервер, если у вас VPS или переехать на новое железо, если старое не тянет. Но с этим нужно разбираться вместе с хостером.
Процессор 3.3 Гц, 6 ядер, 8 Гб оперативки. Кажется, что неплохое железо для одного сайта с посещаемостью 400 хостов в сутки
А что мешает уменьшить скорость обхода? Яндекс - это вещь в себе. Например, если сайт на поддоменах, нет общей скорости, есть отдельные для каждого поддомена, что не есть гуд. Во-вторых, есть стандартный запрос в техподдержку, там могут проверить и уменьшить.
В том и дело, что это минимально возможный показатель, который можно установить. Сайт действительно на поддоменах, на всех установлен общий аккааунт метрики и вебмастера
Все айпишники - Яндекса.
Я разобрался в логах и заблокировал в robots.txt всё, что можно было заблокировать. После чего, утром написал в чат поддержки Яндекс.вебмастера, мол, почему боты игнорируют запрещающие директивы. На что мне ответили, что перечисленный десяток ботов их действительно игнорирует, на robots.txt смотрит только YandexBot. И предложили установить ограничение на количество запросов в минуту (ограничение 200, при 500 нагрузка на проц возрастает до 100%). Оказывается так можно было, но мне не предложили этот вариант при первом обращении. Не знаю, это оперативная реакция технической поддержки или robots помог, но сегодня всё спокойно.
На сайте для каждого города отдельный поддомен. Когда запускалась реклама, боты начинали тянуть всякое, помимо нормальных страниц - типа кэша, стилей, страниц корзины, настроек аккаунта, результатов поиска и т. п. Они и сейчас тянут, но видимо не все из них, что практически полностью убрало нагрузку.