В Search Console в разделе "Поисковый трафик" пункт "Внутренние ссылки" сможете найти любые страницы, которые ссылаются другие страницы сайта.
Возможно сайт был взломан.
Посмотрите, что выводится в коде страницы.
Проверьте сайт здесь: http://rescan.pro
и здесь:http://http://secu.ru/online-services/redirect
Дайте ссылку на сайт.
Незначительный откат, но прежних позиций не достиг.
Тема - авто.
Чудик, на любой заблокированный IP найдется новый. Так вот, другие - пришедшие на смену - послушно выполняют правила и не делают по десять запросов в секунду. Может, у них бот сломался? На позиции и продвижение не повлияло (не считая обсуждаемого здесь провала). До сих пор наблюдался только рост, как в Г, так и в Я.
Это "левый Гугл". С конца декабря он парсит мой сайт - фактически ДДОС. Сейчас запрещен в IP, но никак не успокоится. В том же списке есть такой же бешеный, подписанный Яндексом.
Похоже, что и вправду мой косяк.
Поставил галку в окошке "Модуль PHP" настроек сервера и нагрузка вернулась к прежним значениям.
Как вам?
Ниже ответ хостера:
На Вашем VPS зафиксировано превышение некоторых тарифных лимитов:
resource held maxheld barrier limit failcnt
privvmpages 308775 524286 524288 524288 54
Столбец failcnt здесь - число неудачных попыток выделить ресурсы для процессов.
Более подробно с тарифными лимитами и их описанием Вы можете ознакомиться в документе "Технические параметры VPS-хостинга":
https://shop.hc.ru/repgen/oferta?part=5
Причиной превышения может быть как разовое увеличение нагрузки (например индексирование поисковиками или пиковая посещаемость), так и общая перегруженность Вашего VPS.
В данном случае, причиной вероятнее всего является нагрузка, создаваемая поисковыми системами:
[httpd-logs]# cat vvm-auto.ru.access.log | cut -d' ' -f1 | sort | uniq -c | sort -n | tail
499 62.133.162.201
538 37.54.33.46
688 79.135.155.151
890 141.105.66.31
1517 94.231.71.72
1892 127.0.0.1
4229 141.8.132.69
4370 66.102.9.138
4394 66.102.9.136
4591 66.102.9.134
Выше приведены 10 наиболее часто обращающихся IP-адресов ( Кол-во запросов/IP).
Все эти IP принадлежат поисковым системам. Соответственно Вам необходимо настроить корректную индексацию сайта, используя например файл robots.txt, например используя функцию Crawl-delay - https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml#crawl-delay
Для решения данной ситуации следует оптимизировать работу сайта или сменить тарифный план на более высокий из текущей тарифной линейки VPS.
Особенно порадовало:"или сменить тарифный план на более высокий из текущей тарифной линейки VPS." Они все время предлагают сменить тарифный план.
Примерно тоже самое мне пели, когда я месяц назад сидел на тарифном плане "Виртуальный хостинг". Правда, там зашкаливала нагрузка процессора. Атака шла с этих же IP, подписанных ботами поисковых систем: Гугл и Яндекс. Указанны IP заблокированы в htaccess еще в январе.
Кэширование включено в настройках домена.
Так что вы скажите господа: исходя из изложенных данных, косяков самого сайта не видно? Или мало данных и все-таки необходимо обращаться за платными услугами к специалистам для более глубокого анализа ситуации?
Допустим. Тогда какое решение?
1. Запросить больше вирт памяти для себя (читай сменить тариф)? Даст ли это запас ресурсов для меня?
2. Сменить услугу на выделенный сервер? (Столько денег сайт не приносит) или
3. Сменить хостера hc.ru?
И вообще, можно ли это как-то доказать: что хостер жопит память.
Ребутнул, вроде бы попупстило.
И как теперь проверить - на чьей стороне правда с памятью?
Впрочем, все равно дело в чем-то ином. Все-таки всю неделю расход небольшой, а тут раз и ОПА.