User-agent: GPTBot
Disallow: /search/
Disallow: /ajax/
Disallow: /*?
User-agent: OAI-SearchBot
не слушаются эти краулеры этих директив
их блочить только по АйПИ или через user-agent в .htaccess
у ihc сижу.
цены на ВПС, бэкап хостинг не менялись пока
у вас после проведения анализа лога,
появляются две закладки: ASN и Роботы
во вкладке Роботы у вас перечислены обнаруженные в логе Роботы, но вот если Кликнуть по плашке с названием Робота, не раскрывается список с группировкой по отдельным IP и целым подсетям,
чтобы плохих роботов можно было отсекать через брандмауэр сервера или .htaccess непосредственно по IP и их подсетям.
это неудобно. отсекать плохих роботов по анализу user-agent неудобно... т.к. брандмауэр работает только с отдельными IP и подсетями АйПи...
а добавлять строки мод_рерайт в .htaccess неудобно, так как сайтов может быть сотни.. и приходится редактировать сотни .htaccess
добавите детализацию на Вкладку Роботы результатов анализа лога?
нужно смотрел log_access всех сайтов по их объему....
нет ли аномального роста логов какого то из сайтов... если есть, то скорее всего она связана с бесполезных трафиков разных ботов.. их нужно блокировать лучше всего на уровне брандмауэра.. второй уровень по скорости блокировки через мод рерайт в .htaccess
....
не лишним будет смотреть ОЗУ сервера по команде top ...
есть ли забивание памяти скриптами под завязку.... после чего и начинаются отказы в генерации веб страниц...
Пасхальные праздники и дни..
.. спад по посещаемости и доходу в РСЯ... в моей нише.. тематической...
рост наверно только у тех вебмастеров, у кого сайты с Пасхой связаны...
согласен с мнением большинства...
... слезайте все кто может с этой капиталистической панели ISP Manager всех версий...
... отвратительная компания, кидающая своих клиентов.. выставляющая свои требования, под свою недопанель...
вместо того, чтобы удовлетворять желания клиентов, которые к тому же им платят..
хамы и наглецы - владельцы и разрабы ISPManager всех версий.
оборжаться.. Янд пупок Мира. .. только и пупок мизерный.. и не всего Мира...
ха-ха-ха....
но я как бы в курсе.. хозяин Янда барин...
ihc пользуюсь...
думаю тариф за 1000 руб в мес у них есть...
сейчас у меня заработало.. через другой прокси... сестра со мной делилась двумя прокси... один не работает, другой фукционален..
а сестре настройки прокси дали программисты на работе...
в общем вроде ТГ заработал
